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本 书 全 面 系统 地 介绍 了 软件 测试 的 方法 与 技术 。 书 中 结合 实例 ,详细 介绍 了 动态 测试 和 静态 测试 中 
的 典型 技术 方法 ,比较 了 各 种 方法 的 不 同 之 处 并 分 析 了 它们 的 优 缺 点 ; 紧 扣 软件 测试 实际 和 标准 规范 要 
求 ,从 测试 原则 、 测 试 环境 、 测 试 策略 ,测试 内 容 、 测 试 方法 ,测试 过 程 等 不 同方 面 分 别 介绍 了 单元 测试 、 集 
成 测试 .配置 项 测试 和 系统 测试 等 不 同 测试 级 别 中 实用 的 测试 方法 与 技术 ;此 外 还 介绍 了 常用 的 软件 测试 
工具 ,软件 测试 文档 的 编写 ,以 及 回归 测试 、 面 向 对 象 软件 测试 .FPGA 测试 等 专门 测试 。 

本 书 定位 于 一 本 软件 测试 方法 和 技术 的 实用 指南 ,适用 于 软件 从 业 人 员 了 解 软件 测试 的 基础 知识 ,一 
般 流 程 . 实 用 技术 方法 和 常用 测试 工具 ,帮助 软件 从 业 人 员 提 高 技术 能 力 和 过 程 能 力 水 平 ,也 适用 于 软件 
测试 机 构建 立 测 试 能 力 体 系 ,规范 软件 测试 管理 。 
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为 应 对 “软件 危机 ”的 挑战 .人 们 在 20 世纪 60 年 代 末 提出 借鉴 传统 行业 在 质量 管理 方 
面 的 经 验 , 用 工程 化 的 思想 来 管理 软件 ,以 提高 复杂 软件 系统 的 质量 和 开发 效率 , 即 软件 工 
程 化 。40 多 年 以 来 ,软件 已 广泛 应 用 到 各 个 工程 领域 乃至 生活 的 各 个 方面 , 极 大 地 提高 了 
社会 信息 化 水 平 ,软件 工程 也 早已 深入 人 心 。 

质量 是 产品 的 生命 ,对 软件 尤其 如 此 。 软 件 的 直观 性 远 不 及 硬件 ,软件 的 质量 管理 相对 
困难 得 多 ;但 与 传统 行业 类 似 , 大 型 复杂 软件 的 质量 在 很 大 程度 上 取决 于 软件 过 程 质量 。 质 
量 评估 是 质量 管理 的 关键 ,没有 科学 的 评估 标准 和 方法 ,就 无 从 有 效 地 管理 质量 ,软件 评测 
是 质量 评估 的 最 有 效 和 最 重要 的 手段 之 一 。 

北京 跟踪 与 通信 技术 研究 所 软件 评测 中 心 是 从 事 软 件 评测 与 工程 化 管理 的 专业 机 构 ， 
是 在 我 国 大 力 发 展 航 天 事业 的 背景 下 ,为 保障 载 人 航天 工程 软件 质量 ,经 原 国 防 科 工 委 批 
准 ,国内 最 早 成 立 的 第 三 方 软件 评测 与 工程 化 管理 的 技术 实体 组 织 之 一 。 自 成 立 以 来 ,软件 
评测 中 心 出 色 地 完成 了 以 载 人 航天 工程 探 月 工程 为 代表 的 数 百 项 重大 工程 关键 软件 评测 
项 目 , 自 主 研发 了 测试 仿真 软件 系统 、 测 试 辅助 设计 工具 、 评 测 项 目 与 过 程 管 理 软件 等 一 系 
列 软件 测试 工具 ,为 主 制订 了 GB/T 15532 一 2008《 计 算 机 软件 测试 规范 》.GB/T 9386 一 
2008《 计 算 机 软件 测试 文档 编制 规范 》.GJB 141《 军 用 软件 测试 指南 ) 等 软件 测试 标准 ,深入 
研究 了 软件 测试 自动 化 ,缺陷 分 析 与 预测 、 可 信和 性 分 析 与 评估 、 测 试用 例 复 用 等 软件 测试 技 
术 , 在 柑 入 式 软 件 、 非 嵌入 式 软件 和 可 编程 逻辑 器 件 软 件 等 不 同类 型 软件 测试 领域 ,积累 了 
丰富 的 测试 经 验 和 强大 的 技术 实力 。 

为 进一步 促进 技术 积累 和 对 外 交流 ,北京 跟踪 与 通信 技术 研究 所 组 织 编写 了 本 套 丛书 。 
本 丛书 是 软件 评测 中 心 多 年 来 技术 经 验 的 结晶 .致力 于 以 资深 软件 从 业者 和 工程 一 线 技 术 
人 员 的 视角 ,融会 贯通 软件 工程 特别 是 软件 测试 质量 评估 与 过 程 管理 等 领域 相关 的 知识 、 
技术 和 方法 。 本 从 书 的 特色 是 重点 突出 、 实 用 性 强 .每 本 书 针对 不 同方 向 ,着 重 介绍 实践 中 
常用 的 、 好 用 的 技术 内 容 , 并 配 以 相应 的 范例 .模板 、 算 法 或 工具 ,具有 很 高 的 参考 价值 。 

本 从 书 将 为 具有 一 定 知识 基础 和 工作 经 验 、 想 要 实现 快速 进 阶 的 从 业者 提供 一 套 内 容 
丰富 的 实践 指南 。 对 于 要 对 工作 经 验 较 少 的 初 人 职 人 员 进 行 技术 培训 ,快速 提高 其 动手 能 
力 的 单位 或 机 构 ,本 丛书 也 是 一 套 难 得 的 参考 资料 。 


2015 年 5 月 6 日 
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软件 测试 是 保障 软件 质量 的 重要 手段 ,是 构建 高 可 信和 软件 的 关键 环节 。 随 着 软件 应 用 
的 日 益 广泛 ,人 们 对 软件 测试 重要 性 的 认识 越 来 越 深 刻 。20 世纪 80 年 代 以 来 ,特别 是 在 最 
近 一 二 十 年 间 , 软 件 测试 无 论 是 作为 一 项 技术 .一 门 学 科 还 是 作为 一 个 行业 ,都 得 到 了 快速 
莲 勃 的 发 展 。 

本 书 定位 于 一 本 软件 测试 方法 和 技术 的 实用 指南 , 紧 扣 软件 测试 实际 和 标准 规范 要 求 ， 
结合 行业 内 软件 测试 现状 ,系统 地 介绍 软件 测试 相关 的 知识 方法、 技术 和 软件 工具 ,给 出 较 
为 详细 的 软件 测试 过 程 技术 文档 模板 。 

本 书 旨 在 帮助 软件 从 业 人 员 了 解 软件 测试 的 基础 知识 .一 般 流 程 . 实 用 技术 方法 和 常用 
测试 工具 ,提高 技术 能 力 和 过 程 能 力 水 平 , 以 及 帮助 软件 测试 机 构建 立 测 试 能 力 体 系 , 规 范 
软件 测试 过 程 管理 。 

本 书 是 作者 多 年 从 事 软 件 测试 工程 实践 和 技术 方法 研究 的 经 验 总 结 ,与 其 他 公开 教材 
相 比 ,主要 特色 有 : 实用 性 强 , 本 书 紧 扣 软件 测试 实际 和 标准 规范 要 求 ,着 重 介绍 测试 实践 
中 常用 和 好 用 的 知识 技术 和 方法 ;视角 特殊 ,本 书 从 第 三 方 测评 的 角度 ,系统 地 阐述 适用 于 
工程 实践 的 测试 方法 和 技术 ,反映 行业 实际 需求 和 技术 发 展 动态 。 

本 书 共有 12 章 ,可 分 为 5 大 部 分 。 

第 一 部 分 (第 1 章 ) 是 软件 测试 概述 ,简要 介绍 软件 测试 发 展 历程 .软件 测试 典型 定义 、 
软件 测试 一 般 原 则 .常用 软件 测试 模型 .常见 软件 测试 级 别 与 测试 类 型 .软件 测试 相关 的 标 
准 规范 等 基本 内 容 。 

第 二 部 分 (第 2.3 章 ) 是 软件 测试 技术 ,结合 程序 实例 ,分 别 介绍 静态 测试 技术 和 动态 测 
试 技术 ,并 对 典型 技术 进行 比较 分 析 。 

第 三 部 分 (第 4 一 7 章 ) 按 照 不 同 的 测试 级 别 , 从 测试 原则 、 测 试 环境 、 测 试 策 略 、 测 试 内 
容 ,测试 方法 ,测试 过 程 等 方面 分 别 介 绍 单元 测试 .集成 测试 、 配 管 项 测试 和 系统 测试 中 的 实 
用 测试 方法 与 技术 。 

第 四 部 分 (第 8 一 10 章 ) 以 独立 章节 分 别 介绍 回归 测试 、 面 向 对 象 软件 测试 和 FPGA 测 
试 等 专门 测试 类 别 中 的 实用 测试 方法 与 技术 。 

第 五 部 分 (第 11、12 章 ) 主 要 内 容 是 测试 实践 ,第 11 章 分 别 介绍 了 在 静态 测试 ,动态 测 
试 和 测试 管理 中 常用 的 软件 工具 。 第 12 章 着 重 介 绍 测试 策划 ,测试 设计 、 测 试 实施 和 测试 
总 结 等 测试 过 程 中 常用 的 技术 文档 .给 出 通用 技术 文档 模板 。 

软件 测试 包含 大 量 相关 的 活动 .有 些 是 技术 性 的 ,有 些 是 管理 性 的 ,还 有 些 是 相互 交织 
的 。 例 如 ,单元 测试 .集成 测试 .配置 项 测试 .系统 测试 .回归 测试 中 测试 用 例 .测试 数据 和 测 
试 期 望 结 果 的 设计 是 典型 的 技术 性 活动 ;人 员 计 划 、 成 本 预算 以 及 配置 管理 .项 目 监控 中 的 
大 部 分 内 容 是 典型 的 管理 性 活动 。 如 前 所 述 ,本 书 偏重 于 讲述 软件 测试 的 技术 性 活动 ,软件 
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测试 的 管理 性 活动 将 在 本 套 从 书 的 另 一 本 书 ( 软 件 测试 管理 ) 中 重点 介绍 。 

本 书 第 1 一 3 章 由 张 卫 祥 编写 ,第 4 一 7 章 和 第 12 章 由 刘 文 红 编写 ,第 8 章 由 陈 青 编写 ， 
第 9 章 由 齐 玉 华 编写 ,第 10 章 由 司 倩 然 编 写 ,第 11 章 由 马 贤 颖 和 司 倩 然 编写 。 全 书 由 刘 文 
红 、 杜 会 森 统 稿 。 赵 辉 、 张 卫 民 、 杨 宝 明 、 李 国 华 、 牛 胜 芬 等 专家 审阅 了 初稿 并 提出 了 许多 宝 
贵 意见 。 

在 本 书 编写 过 程 中 ,得 到 了 北京 跟踪 与 通信 技术 研究 所 ,特别 是 软件 评测 中 心 的 大 力 支 
持 , 还 得 到 了 编者 同事 、 朋 友和 家 人 的 关心 与 帮助 ,在 此 一 并 表示 感谢 ! 

由 于 水 平 有 限 ,本 书 肯定 还 存在 不 少 问题 , 敬 请 大 家 批评 指正 。 


编 者 
2017 年 4 月 
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软件 测试 概述 


随 着 科学 技术 的 迅速 发 展 . 人 类 已 经 进入 信息 社会 。 信 息 的 获取 、 处 理 .交流 和 决策 都 
需要 大 量 的 软件 ,软件 成 为 了 人 们 工作 和 生活 中 不 可 或 缺 的 工具 。 软 件 的 应 用 日 益 广泛 , 软 
件 的 质量 受到 人 们 越 来 越 多 的 关注 。 特 别 是 在 航空 航天 、 金 融 保 险 、 交 通通 信 、 工 业 控 制 等 
重要 领域 ,软件 一 旦 失效 将 造成 重大 损失 ,因此 对 软件 质量 提出 了 更 高 的 要 求 。 

1996 年 6 月, 阿 丽 亚 娜 5CARIANE 5) 火 箭 在 历时 十 年 研制 后 的 首次 发 射 中 ,由 于 软 
件 故障 造成 火箭 升 空 40s 后 即 发 生 爆 炸 , 直 接 经 济 损失 达到 5 亿美 元 ,还 使 得 耗资 80 亿 
美元 的 开发 计划 推迟 了 近 3 年 。2003 年 5 月 ,俄罗斯 TMAI 号 宇宙 飞船 ,由 于 软件 错误 
导致 导航 系统 故障 ,造成 飞船 从 国际 空间 站 返回 地 面 时 与 飞行 控制 中 心 失去 联系 长 达 
llmin, 飞 船 最 终 降落 在 与 预定 降落 点 偏差 460 多 千 米 的 地 方 。2003 年 8 月 ,由 于 
FirstEnergy 公司 电力 监测 与 控制 管理 系统 的 预警 服务 出 现 软件 错误 ,导致 多 个 重要 设备 
出 现 故障 ,而 操作 员 在 一 个 小 时 后 才 得 到 控制 站 的 指示 ,造成 美国 及 加 拿 大 部 分 地 区 史 
上 最 大 停电 事故 。 

软件 测试 是 保障 软件 质量 的 重要 手段 ,是 构建 高 可 信和 软件 的 关键 环节 。 随 着 人 们 对 软 
件 测试 重要 性 的 认识 越 来 越 深 刻 ,软件 测试 阶段 在 整个 软件 开发 周期 中 所 占 的 比重 日 益 增 
大 。 统 计数 据 表 明 .软件 测试 占 软件 开发 总 成 本 的 比例 一 般 达 到 50% 以 上 。 现 在 有 些 软件 
开发 机 构 将 40% 以 上 的 研制 力量 投入 到 软件 测试 之 中 ;对 于 某 些 性 命 侯 关 的 软件 ,其 测试 
费用 甚至 高 达 所 有 其 他 软件 工程 阶段 费用 总 和 的 3 一 5 倍 。 尽 管 人 们 在 软件 开发 过 程 中 也 
采用 形式 化 方法 描述 和 证 明 软 件 规约 ,并 采用 程序 正确 性 证 明 、 模 型 检验 等 方法 保证 软件 质 
量 ,但 是 这 些 方法 都 存在 一 定 的 局 限 性 ,尚未 达到 广泛 实用 阶段 。 软 件 测试 在 今后 较 长 时 间 
内 仍 将 是 保证 软件 质量 的 重要 手段 。 


1.1 软件 测试 简 史 


人 们 对 软件 测试 的 认识 是 逐步 发 展 起 来 的 ,如 图 1-1 所 示 。 在 20 世纪 50 年 代 , 计 算 机 
技术 发 展 初期 .软件 规模 都 很 小 .复杂 度 相 对 较 低 .软件 错误 大 部 分 在 开发 人 员 的 调试 阶段 
就 发 现 解决 了 .软件 测试 被 定义 为 “程序 员 为 了 在 他 们 的 程序 中 找到 bug 所 做 的 事情 ”。 在 
这 个 阶段 ,测试 和 调试 是 等 同 的 ,都 是 由 开发 人 员 自己 完成 。 

在 20 世纪 60 年 代 早期 ,软件 测试 与 调试 区 分 开 来 ,测试 主要 在 程序 编写 后 进行 。 人 们 
开始 考虑 以 遍历 代码 的 可 能 路 径 或 可 能 的 输入 变量 的 方式 ,对 软件 进行 “彻底 ”的 测试 。 现 
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缺陷 预防 与 测试 过 程 。 高 级 测试 自动 化 自动 业务 优化 
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工作 工作 化 工具 ”质量 保证 


图 1-1 软件 测试 的 发 展 


在 我 们 知道 ,由 于 程序 的 输入 域 太 大 、 有 太 多 可 能 的 输入 路 径 以 及 设计 和 规约 等 问题 很 难 测 
试 ,完全 彻底 地 测试 一 个 程序 是 不 可 能 的 。 

在 20 世纪 70 年 代 早 期 , 随 着 软件 开发 的 成 熟 , 人 们 开始 提出 软件 开发 的 工程 化 思想 ， 
软件 测试 得 到 发 展 ,软件 测试 的 地 位 得 到 确认 。 软 件 测试 被 定义 为 “证明 一 个 程序 的 正确 性 
而 要 做 的 事情 ”, 即 证 明 软 件 能 够 工作 。 这 期 间 提出 的 “正确 性 证 明 技术 ”, 建 议 在 软件 分 析 、 
设计 和 实现 过 程 中 通过 证 明 的 方式 进行 软件 正确 性 验证 ,在 理论 上 很 有 前 途 , 但 在 实践 中 过 
于 耗 时 ,效率 极 低 。 

在 20 世纪 70 年 代 后 期 ,测试 被 定义 为 带 着 找到 错误 的 意图 执行 程序 的 过 程 ,而 不 是 证 
明 程 序 能 够 运行 的 过 程 。 与 上 一 观点 相反 .这 种 观点 强调 了 好 的 测试 用 例 能 够 有 更 大 几率 
去 发 现 尚未 发 现 的 错误 ,成功 的 测试 是 发 现 了 尚未 发 现 的 错误 的 测试 。 

20 世纪 80 年 代 , 随 着 软件 行业 的 飞速 发 展 ,软件 测试 的 理论 和 技术 得 到 了 快速 的 发 
展 , 人 们 开始 把 软件 测试 作为 软件 质量 保证 的 重要 手段 ,认识 到 软件 测试 不 是 一 次 性 在 开发 
后 期 完成 的 ,软件 测试 也 不 再 仅 限于 程序 本 身 , 软 件 测试 的 定义 被 扩展 到 缺陷 预防 ,软件 测 
试 活动 被 扩充 到 对 需求 . 设计、 编码. 测试 等 整个 软件 开发 生存 周期 的 过 程控 制 中 。IEEE 
对 软件 测试 定义 为 “使 用 人 工 或 自动 的 手段 来 运行 或 测定 某 个 软件 系统 的 过 程 ,其 目的 在 于 
检验 它 是 否 满足 规定 的 需求 或 弄 清楚 预期 结果 与 实际 结果 之 间 的 差别 ”, 并 发 布 了 软件 测试 
文档 的 国际 标准 。 

在 20 世纪 80 年 代 中 期 ,自动 化 测试 工具 出 现 了 。 相 比 于 手动 测试 ,自动 化 测试 工具 的 
引入 大 幅 提高 了 测试 的 效率 和 质量 。 测 试 工具 起 初 还 是 相当 原始 的 ,不 具有 高 级 脚本 语言 
工具 。 

在 20 世纪 90 年 代 早 期 ,从 质量 保证 的 观点 ,测试 的 含义 被 定义 为 策划、 设计 、 建 造 、 维 
护 和 执行 测试 及 测试 环境 ,软件 测试 的 过 程 应 是 受 管理 的 ,其 自身 也 存在 一 个 生存 周期 。 
更 多 的 录制 /回放 测试 工具 提供 了 丰富 的 脚本 语言 和 报告 功能 ,测试 管理 工具 可 帮助 管理 从 
测试 需求 分 析 和 设计 到 测试 脚本 和 缺陷 的 所 有 内 容 , 也 有 一 些 商 用 的 性 能 工具 来 测试 系统 
的 性 能 ,能够 进行 压力 和 负载 测试 等 。 

在 20 世纪 90 年 代 中 期 .人 们 仍 认为 测试 应 是 一 个 贯穿 整个 软件 开发 生存 周期 的 过 
程 ,但 是 随 着 互联 网 的 流行 ,软件 的 生存 周期 模型 和 开发 模式 发 生 了 很 大 的 变化 ,使 得 软 
件 测试 变 得 越 来 越 困 难 。 测 试 有 时 在 没有 明确 预先 定义 所 有 测试 方向 的 情况 下 进行 ,这 
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种 测试 方法 被 认为 是 敏捷 测试 ,其 他 测试 技术 还 有 探索 测试 、 快 速 测试 和 基于 风险 的 测 
试 等 。 

随 着 信息 科学 和 软件 开发 技术 的 发 展 , 人 们 对 软件 测试 的 概念 及 其 作用 的 认识 已 趋 于 
成 熟 和 稳定 ,进入 21 世纪 以 来 ,对 软件 测试 的 研究 主要 集中 于 软件 测试 的 技术 方法 和 最 佳 
实践 上 ,目的 是 提升 软件 测试 的 效率 和 效果 。 自 动 业务 优化 (BTO) 的 基本 思想 是 衡量 软件 
在 其 整个 生存 周期 中 的 价值 并 使 其 最 大 化 .以 确保 软件 达到 可 用 性 、 性 能 、 质 量 和 经 济 相 协 
调 的 目标 。 软 件 测 试 作为 软件 整个 生存 周期 的 一 项 重要 活动 被 内 曾 其 中 。 

由 于 人 们 对 软件 质量 越 来 越 关注 ,对 软件 测试 越 来 越 重视 ,可 以 预测 ,在 未 来 很 长 的 时 
间 内 ,软件 测试 将 会 得 到 快速 发 展 ,软件 测试 理论 将 更 加 完备 ,软件 测试 工具 将 更 加 丰富 , 软 
件 测 试行 业 将 莲 勃 发 展 , 测 试 人 员 素 质 和 能 力 将 不 断 提 升 。 测 试 有 效 性 和 效率 最 大 化 是 软 
件 测试 的 共性 问题 ,测试 自动 化 和 智能 化 将 成 为 软件 测试 的 重要 发 展 方向 之 一 。 


1.2 软件 测试 定义 


在 GB/T 11457 一 2006《 信 息 技术 软件 工程 术语 ) 中 ,测试 被 定义 为 “a) 在 规定 的 条 件 
下 操作 系统 或 部 件 、 观 察 或 记录 结果 并 对 系统 或 部 件 的 某 些 方面 作 评 价 的 过 程 ; b) 分 析 软 
件 项 以 检测 在 存在 的 和 要 求 的 条 件 之 间 的 区 别 ( 即 , 隐 错 ) 以 评价 软件 项 的 特征 ”。 也 就 是 
说 ,软件 测试 可 分 为 确认 和 验证 两 部 分 。 

“确认 ” 指 的 是 检查 所 开发 的 软件 是 否 满足 用 户 真正 需求 的 活动 。 从 用 户 的 真正 需要 出 
发 ,对 软件 需求 和 设计 说 明 存 疑 .以 发 现 软件 需求 定义 、 产 品 设计 和 程序 实现 中 的 问题 。 

“验证 " 指 的 是 检验 软件 是 否 正确 实现 了 软件 需求 规格 书 、 产 品 设计 说 明 等 文档 中 所 定 
义 的 功能 和 特性 的 活动 。 验 证 过 程 应 提供 证 据 以 表明 软件 产品 与 研制 要 求 相 一 致 ,或 表明 
两 者 之 间 的 差异 。 

人 们 对 软件 测试 的 认识 是 不 断 深入 的 。 随 着 软件 测试 的 持续 发 展 , 曾 出 现 了 许多 对 软 
件 测试 的 重要 观点 或 定义 。 这 些 观点 一 度 非常 流行 ,有些 至 今 仍 很 有 价值 ,表现 了 人 们 从 特 
定 角 度 对 软件 测试 的 认识 。 

“(软件 测试 ) 就 是 建立 一 种 信心 ,表明 程序 能 够 按照 预期 的 设想 运行 ", 这 是 软件 测试 先 
驱 Bill Hetzel 在 1973 年 给 出 的 软件 测试 的 定义 。 后 来 .Bill Hetzel 在 其 1983 年 出 版 的 经 
典 著作 The Complete Guide to Software Testing 中 .对 上 述 定 义 进行 了 修订 :“ 测 试 是 评 
价 一 个 程序 或 者 系统 的 属性 和 能 力 的 各 种 活动 .并 确定 它 是 否 达 到 预期 的 结果 。” Bill 
Hetzel 的 核心 观点 是 : 测试 的 目的 是 验证 软件 是 “工作 的 ”, 即 以 正 向 思维 方式 ,针对 软件 系 
统 的 所 有 功能 点 ,逐个 验证 其 正确 性 。 这 种 观点 比较 符合 用 户 的 角度 。 对 于 用 户 来 说 ,适当 
的 测试 是 能 够 接受 软件 或 系统 的 依据 。 用 户 通 过 亲自 或 委托 第 三 方 的 测试 ,获得 测试 结果 ， 
对 软件 系统 的 质量 进行 判断 并 做 出 最 后 的 抉择 。 

“测试 是 为 了 发 现 错误 而 执行 程序 的 过 程 ”. 这 是 另 一 位 软件 测试 先驱 Glenford Myers 
1979 年 在 其 著名 的 著作 The Art of Software Testing 中 给 出 的 定义 。 后 来 , Glenford 
Myers 对 该 定义 进行 了 完善 ,进一步 提出 了 他 对 软件 测试 的 重要 观点 : 测试 是 为 了 证 明 程 
序 有 错 , 而 不 是 证 明 程 序 无 错误 ;一 个 好 的 测试 用 例 在 于 它 能 发 现 至 今 未 发 现 的 错误 ;一 个 
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成 功 的 测试 是 发 现 了 至 今 未 发 现 的 错误 的 测试 。 这 种 观点 的 核心 是 证 明 软 件 是 “不 工作 
的 ”, 即 以 反 向 思维 ,不 断 思考 软件 或 系统 的 弱点 .发现 软件 或 系统 中 存在 的 问题 。 这 种 观点 
比较 符合 软件 技术 人 员 的 角度 。 对 开发 方 来 讲 , 软 件 测试 可 尽早 地 发 现 和 改正 软件 中 的 错 
误 , 避 免 给 用 户 造成 损失 和 给 开发 方 的 信誉 造成 不 良 影响 。 

“(测试 是 ) 使 用 人 工 或 自动 的 手段 来 运行 或 测定 某 个 软件 系统 的 过 程 ,其 目的 是 检验 软 
件 系统 是 否 满足 规定 的 需求 或 弄 清 预 期 结果 与 实际 结果 之 间 的 差别 ”, 这 是 1983 年 IEEE 
软件 工程 术语 标准 中 对 软件 测试 给 出 的 定义 。 这 个 定义 明确 指出 软件 测试 的 目的 是 检验 软 
件 系统 是 否 满足 需求 。 软 件 测试 不 再 是 一 个 一 次 性 的 、 软 件 开发 后 期 的 活动 ,而 是 与 整个 开 
发 流程 融 为 一 体 。 现 在 我 们 认为 ,软件 测试 是 贯穿 整个 软件 开发 生存 周期 ,对 软件 产品 ( 包 
括 阶 段 性 产品 ) 进 行 验证 和 确认 的 活动 过 程 .其 目的 是 尽早 、 尽 快 地 发 现 软件 产品 中 存在 的 
各 种 问题 以 及 与 用 户 需 求 .预先 定义 不 一 致 的 地 方 。 

软件 测试 还 存在 如 下 重要 特征 : 软件 测试 是 不 完全 的 或 无 法 穷尽 的 ;软件 测试 是 证 错 
的 而 不 证 对 的 , 即 不 完全 的 软件 测试 无 法 证 明 软 件 的 正确 性 ,只 能 证 明 软 件 的 不 正确 性 。 

软件 测试 是 不 完全 的 或 无 法 穷尽 的 ,是 因为 如 下 3 点 : 

(1) 测试 是 几乎 不 可 能 100%% 覆 盖 的 。 一 般 来 说 ,由 于 软件 的 复杂 性 和 大 规模 ,软件 的 
输入 空间 非常 庞大 ,程序 中 可 以 执行 的 路 径 无 法 穷尽 。 如 果 有 充足 的 条 件 进 行 不 断 的 测试 ， 
总 是 可 以 找到 更 多 的 缺陷 。 

(2) 测试 环境 难以 和 实际 运行 或 用 户 环境 完全 吻合 。 某 些 缺 陷 只 有 在 用 户 环 境 下 才 存 
在 ,有 些 缺 陷 只 有 在 软件 运行 一 段 时 间 后 , 随 着 过 量 或 无 效 数据 的 积累 才 会 发 生 。 

(3) 测试 人 员 对 产品 的 理解 不 能 完全 代表 实际 用 户 的 理解 。 这 两 者 之 间 的 差异 意味 着 
可 能 会 存在 某 些 对 测试 人 员 来 说 不 是 缺陷 但 对 于 用 户 来 说 是 缺陷 的 缺陷 。 

软件 测试 是 证 错 而 不 证 对 的 , 即 不 完全 的 软件 测试 无 法 证 明 软件 的 正确 性 ,只 能 证 明 软 
件 的 不 正确 性 。 这 主要 是 因为 如 下 2 点: 

(1) 发 现 的 错误 越 多 并 不 能 说 明 软件 中 剩余 的 错误 就 越 少 ,相反 地 ,发 现 错误 越 多 的 地 
方 往往 漏 掉 错 误 的 可 能 性 越 大 。 软 件 错误 存在 “群集 现象 ”, 根 据 " 二 八 原理 ”,20% 的 代码 可 
能 包含 了 软件 中 80% 的 错误 。 

(2) 修正 过 去 的 缺陷 往往 会 导致 新 缺陷 的 产生 。 需 求 总 是 变化 的 ,软件 系统 不 是 一 成 
不 变 的 , 变 是 永恒 的 ,“ 变 ”可 能 会 带 来 新 的 缺陷 。 


1.3 软件 测试 原则 


软件 测试 的 最 终 目 标 是 提高 客户 的 满意 度 ,而 在 交付 软件 前 发 现 尽 可 能 多 的 缺陷 将 有 
助 于 达到 该 目标 。 好 的 测试 应 该 能 用 最 少 的 时 间 和 最 小 的 代价 发 现 不 同类 型 的 错误 。 

软件 测试 的 目标 可 表述 为 5 个 方面 : 验证 、 确 认 、 缺 陷 预 防 、 质 量 改进 和 可 靠 性 评价 。 
验证 是 证 实 软件 已 满足 其 技术 规格 说 明 的 过 程 , 用 来 检查 每 个 开发 活动 得 到 的 产品 ,以 确定 
软件 开发 的 结果 是 否 满足 对 应 的 需求 ;确认 过 程 用 来 证 实 软 件 已 满足 其 业务 需求 ,确认 活动 
可 以 在 软件 开发 生存 周期 中 实施 ,以 保证 所 有 的 需求 已 被 满足 ;缺陷 是 指 软件 在 使 用 过 程 中 
其 预期 结果 与 实际 结果 之 间 存 在 的 差异 .开发 和 维护 大 规模 应 用 软件 所 面临 的 主要 挑战 是 
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如 何 尽 早 地 识别 缺陷 ;质量 可 被 一 组 称 为 特性 的 属性 进行 描述 ,这 些 质量 属性 可 以 通过 软件 
测试 以 进行 改进 :软件 可 靠 性 指 的 是 在 规定 的 时 间 和 环境 下 ,软件 无 失效 运行 的 概率 ,可 以 
通过 分 析 测 试 获得 的 数据 进行 可 靠 性 评价 。 

根据 软件 测试 的 目的 与 定义 ,软件 测试 的 一 般 原 则 包括 以 下 15 点 : 

(1) 尽早 地 和 不 断 地 进行 软件 测试 。 由 于 软件 的 抽象 性 和 复杂 性 ,在 软件 开发 的 每 个 
阶段 都 可 能 引入 缺陷 。 数 据 显示 ,软件 缺陷 发 现 得 越 早 ,修复 缺陷 的 成 本 就 越 低 ;问题 发 现 
得 越 晚 ,解决 问题 的 代价 就 越 大 。 因 此 ,从 需求 分 析 甚 至 更 早 的 时 候 开 始 , 软 件 开 发 过 程 中 
就 应 该 开展 软件 测试 活动 。 同 时 ,软件 测试 应 该 贯穿 整个 软件 开发 生存 周期 ,在 软件 开发 的 
每 个 环节 不 断 地 进行 测试 ,才能 及 时 地 发 现 错误 ,避免 错误 的 累积 和 扩大 。 目 前 较 新 的 极限 
编程 和 测试 驱动 开发 技术 更 是 强调 测试 先行 ,提出 在 编码 开始 之 前 就 编写 测试 用 例 , 用 测试 
指导 代码 编码 。 

(2) 测试 要 有 停止 准则 ,适可而止 。 在 有 限 的 时 间 和 资源 条 件 下 找 出 所 有 的 软件 缺陷 ， 
进行 完全 的 测试 ,几乎 是 不 可 能 的 。 测 试 应 尽 可 能 多 地 发 现 缺陷 ,特别 是 严重 等 级 较 高 的 、 
影响 软件 正常 运行 的 缺陷 ,但 无 法 穷尽 。 根 据 实际 情况 ,决定 测试 范围 和 测试 程度 并 进行 有 
效 地 控制 ,才能 更 好 地 协调 开发 与 测试 的 关系 ,以 最 少 成 本 获得 最 大 回报 ,达到 测试 的 理想 
效果 。 

(3) 软件 测试 须 具 有 一 定 的 独立 性 。 程 序 员 应 尽 可 能 地 避免 测试 自己 编写 的 程序 , 开 
发 小 组 应 尽 可 能 地 避免 测试 本 小 组 开发 的 程序 。 如 果 条 件 允许 ,应 由 相对 独立 的 测试 部 门 
或 第 三 方 测试 机 构 进行 测试 ;或 者 至 少 应 采取 互相 自 测 的 方式 。 这 主要 是 因为 程序 员 不 愿 
意 且 也 不 容易 发 现 自己 编写 的 程序 中 的 错误 。 

(4) 软件 测试 应 追溯 到 用 户 需 求 。 软 件 开 发 的 最 终 目 的 是 满足 最 终 用 户 的 需求 ,使 用 
户 按 预期 完成 指定 的 任务 。 软 件 中 最 严重 的 错误 是 那些 导致 软件 无 法 满足 用 户 需求 的 缺 
陷 。 软 件 测试 人 员 应 紧 紧 围绕 用 户 需求 ,站 在 用 户 角 度 看 问题 。 不 满足 用 户 需求 的 软件 是 
无 法 顺利 交付 的 ,这 也 是 验收 测试 以 用 户 需求 为 依据 的 原因 。 

(5) 应 进行 有 重点 的 测试 。 从 风险 观点 来 讲 , 软 件 测试 可 以 被 定义 为 对 软件 中 潜在 
的 各 种 风险 进行 评估 的 活动 。 由 于 不 可 能 进行 完全 测试 ,从 某 种 意义 上 ,测试 了 什么 比 
测试 了 多 少 更 重要 。 所 以 ,应 进行 软件 风险 分 析 ,根据 风险 大 小 确定 测试 的 优先 级 和 执 
行 顺序 。 

(6) 应 认真 做 好 测试 计划 。 合 理 的 计划 是 成 功 的 一 半 ,测试 前 应 与 用 户 、 开 发 方 沟通 ， 
对 被 测 软件 进行 分 析 , 明 确 测 试 目 的 、 测 试 范围 .测试 环境 ,测试 方 法 以 及 测试 所 需 的 资源 等 
内 容 , 形 成 测试 计划 。 软 件 测试 应 按 计 划 进 行 , 切 忌 随意 性 。 

(7) 设计 完善 的 测试 用 例 。 测 试用 例 除了 要 对 输入 数据 进行 详细 描述 ,还 应 给 出 预期 
输出 结果 ,否则 ,很 可 能 在 测试 过 程 中 因 无 法 与 预期 结果 比 对 ,错过 本 应 发 现 的 错误 。 另 外 ， 
测试 用 例 不 仅 应 包括 有 效 或 合法 的 输入 ,还 要 考虑 无 效 或 非法 的 输入 情况 。 程 序 员 往 往 基 
于 预料 之 中 的 输入 编写 程序 ,而 忽视 对 非 预料 输入 的 处 理 ,使 得 程序 留 有 隐患 。 

(8) 对 测试 用 例 进行 管理 。 应 重视 测试 过 程 中 的 记录 并 保存 相关 文档 ,测试 用 例 作为 
软件 测试 设计 阶段 的 主要 工作 成 果 .是 软件 测试 的 最 重要 内 容 之 一 。 除 了 一 次 性 软件 ,几乎 
所 有 的 软件 测试 都 不 可 能 一 次 性 完成 。 在 生存 周期 中 .软件 一 般 都 要 经 历 多 次 修改 。 已 有 
的 测试 用 例 可 以 为 再 次 测试 时 测试 用 例 的 选择 性 复 用 、 新 测试 用 例 的 生成 等 提供 良好 依据 
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和 基础 ,避免 重复 劳动 ,提高 测试 效率 。 

(9) 选择 合适 的 测试 方法 。 无 论 是 动态 测试 还 是 静态 测试 技术 ,都 有 很 多 测试 方法 。 
应 根据 不 同 软件 不 同 部 分 的 不 同 特点 ,选用 不 同 的 测试 方法 ,开展 充分 而 有 针对 性 的 测试 。 
对 测试 方法 的 选择 是 测试 策略 的 重要 内 容 。 

(10) 使 用 恰当 的 测试 工具 。 测 试 工 具 能 够 扩展 测试 人 员 的 能 力 。 测 试 工 作 是 细致 而 
繁琐 的 ,有 许多 工作 ,比如 某 些 测试 数据 的 生成 、 某 些 测试 结果 比 对 等 ,如 果 手 工 完 成 , 既 累 
人 又 容易 出 错 。 人 恰当 使 用 测试 工具 能 够 提高 测试 的 正确 性 ,并 且 使 测试 人 员 有 更 多 精力 去 
从 事 创造 性 的 工作 ,提高 测试 的 效果 和 效率 。 

(11) 对 实测 结果 进行 确认 。 测 试用 例 执行 结果 中 会 存在 大 量 的 被 测 软件 输出 正确 
和 错误 信息 ,如 果 不 仔细 检查 ,可 能 会 使 错误 被 漏 掉 。 每 个 测试 用 例 承担 不 同 的 测试 任 
务 ,必须 对 用 例 预 期 的 输出 结果 进行 明确 定义 ,对 用 例 的 实测 结果 进行 仔细 分 析 检 查 和 
确认 。 

(12) 对 软件 缺陷 进行 分 析 。 缺 陷 之 间 往 往 存 在 相互 关联 或 依赖 关系 。 事 实 上 ,数据 表 
明 ,软件 缺陷 存在 群集 现象 , 即 大 部 分 的 软件 缺陷 存在 于 小 部 分 的 软件 代码 中 。 通 过 分 析 所 
发 现 的 缺陷 的 类 型 ,来源 .模式 和 趋势 等 ,可 以 进一步 挖掘 新 问题 ,找到 软件 需要 改进 的 
地 方 。 

(13) 进行 回归 测试 。 由 于 缺陷 之 间 的 关联 性 ,程序 员 在 修正 缺陷 后 ,有 可 能 会 引入 其 
他 的 缺陷 ;另外 , 当 需 求 变 更 或 增加 新 的 需求 时 ,对 原 有 软件 也 具有 波及 效应 ,可 能 会 导致 新 
缺陷 的 产生 。 因 此 , 当 软 件 更 动 时 ,应 进行 回归 测试 ,以 保证 已 有 缺陷 被 正确 关闭 且 没 有 引 
入 新 的 缺陷 ,软件 中 原先 能 正常 运行 的 部 分 依然 正常 工作 。 回 归 测 试 是 软件 生存 周期 中 的 
一 个 重要 组 成 部 分 。 

(14) 不 断 进行 培训 。 软 件 测试 是 一 项 富有 创造 性 的 和 挑战 性 的 工作 ,软件 测试 同 其 他 
学 科 一 样 ,有 着 一 套 特定 的 知识 体系 和 技能 要 求 。 根 据 测试 人 员 执 行 测 试 类 型 的 不 同 ,甚至 
还 需要 特殊 的 或 先进 的 知识 或 技能 。 测 试 人 员 需 要 不 断 地 进行 培训 或 自我 培训 ,才能 适应 
测试 工作 中 的 新 挑战 。 

(15) 测试 即 服务 。 软 件 测 试 的 标准 追溯 到 用 户 的 需求 :软件 测试 是 贯穿 整个 软件 生存 
周期 的 活动 ;软件 测试 人 员 通 过 对 软件 产品 进行 研究 ,获取 软件 信息 提供 给 用 户 或 项 目 决策 
者 以 帮助 其 做 出 正确 的 决定 。 把 软件 测试 理解 为 一 种 服务 ,对 用 户 的 服务 ,对 软件 最 终 质量 
的 服务 ,有 利于 软件 测试 工作 的 开展 。 


1.4 软件 的 可 测试 性 


1.4.1 可 测试 性 定义 与 内 酒 


不 同 软件 具有 的 自身 特点 ,使 得 对 其 进行 软件 测试 和 测试 结果 分 析 的 难 易 程 度 不 同 ,这 
也 反映 了 不 同 软件 可 测试 性 的 高 低 。 可 测试 性 是 度量 软件 是 否 容易 被 测试 的 一 种 属性 ,是 
软件 开发 与 测试 中 的 一 个 重要 概念 。 具 有 更 高 可 测试 性 的 软件 能 够 使 得 测试 更 加 容易 ,能 
够 降低 测试 成 本 和 工作 量 ,并 且 往 往 使 软件 具有 更 好 的 质量 。 提 高 软件 可 维护 性 的 一 种 途 
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径 是 针对 可 测试 性 进行 软件 设计 ,通常 需要 考虑 软件 规模 、 复 杂 度 、 系 统 结构 、 分 布 性 、 不 确 
定性 等 多 种 因素 。 

Voas 将 软件 可 测试 性 定义 为 “ 当 软 件 本 身 存 在 故障 并 按 一 种 特定 的 输入 分 布 被 执行 
时 ,软件 会 发 生 失 效 的 概率 ”。 该 定义 把 可 测试 性 与 导致 软件 失效 的 能 力 以 及 软件 运行 环境 
联系 起 来 ,还 有 其 他 定义 把 可 测试 性 与 软件 内 部 可 见 性 、 对 软件 的 控制 能 力 、 对 失效 的 检测 
能 力 、 系 统 的 规模 或 复杂 度 等 相关 联 。 

Bach 把 可 测试 性 定义 为 一 个 软件 能 够 被 测试 的 难 易 程度 ,其 内 部 要 素 包 括 可 操作 性 、 
可 控制 性 ,简单 性 ,稳定 性、 可 理解 性 和 可 观察 性 。 

(1) 可 操作 性 : 指 软件 在 给 定 配置 和 环境 下 被 操作 和 使 用 的 能 力 。 

(2) 可 控制 性 : 指 测试 人 员 为 了 测试 软件 在 极端 环境 下 的 运行 而 创建 复杂 场景 的 难 易 
程度 。 

(3) 简单 性 : 指 软件 实现 规定 用 途 的 能 力 水 平 .包括 功能 简单 性 ,结构 简单 性 和 代码 简 
单 性 。 功 能 简单 性 实现 了 需求 所 规定 的 最 少 特征 :结构 简单 性 使 模块 之 间 的 交互 和 耦合 易 
于 理解 ,代码 简单 性 使 代码 易于 检查 .评审 和 走 查 。 

(4) 稳定 性 : 指 软件 不 需要 经 常 变更 ,如 果 变 更 ,其 变更 是 可 控 的 ,变更 结果 不 会 影响 
自动 化 测试 的 效果 。 

(5) 可 理解 性 : 指 软 件 一 一 包括 程序 和 规格 说 明 、 接 口 文档 、 测 试 文档 、 用 户 手 册 等 产 
品 文档 等 一 一 是 否 易于 理解 。 

(6) 可 观察 性 : 指 利用 测试 工具 从 被 测 软件 捕获 数据 和 信息 以 便 测 试 人 员 对 测试 结果 
进行 分 析 和 比 对 的 能 力 , 也 包括 利用 人 工 方式 对 隐 含 信息 进行 测试 的 能 力 。 





1.4.2 可 测试 性 设计 与 实现 


软件 可 测试 性 表征 了 一 个 软件 在 给 定 测 试 环 境 下 能 够 被 测试 的 程度 。 如 果 软 件 缺 少 可 
测试 性 ,可 能 会 导致 软件 错误 在 软件 生存 周期 后 期 才 被 发 现 并 付出 更 大 的 修复 代价 。 因 此 ， 
在 软件 生存 周期 早期 就 应 该 强调 软件 可 测试 性 。 事 实 上 .如 同 软件 测试 一 样 ,可 测试 性 应 该 
贯穿 于 软件 开发 生存 周期 的 所 有 阶段 。 

在 需求 阶段 ,开发 和 测试 人 员 应 该 充分 理解 用 户 需求 ,在 规格 说 明 中 清晰 定义 软件 预期 
功能 以 及 在 不 正常 场景 下 软件 的 预期 行为 。 对 软件 可 测试 性 ,主要 包括 : 

(1) 清晰 定义 可 测试 性 需求 ; 

(2) 清晰 定义 可 度量 的 需求 ; 

(3) 提出 为 更 好 进行 软件 测试 而 定义 的 需求 ; 

(4) 评审 软件 需求 的 可 测试 性 ,确保 其 是 可 测试 的 和 可 度量 的 。 

在 设计 阶段 ,针对 需求 阶段 的 各 种 软件 需求 进行 有 效 而 详细 的 设计 。 对 软件 可 测试 性 ， 
主要 包括 : 

(1) 加 强 软件 体系 结构 模型 和 接口 设计 的 可 测试 性 ; 

(2) 定义 软件 设计 模式 、 标 准 和 框架 以 提高 可 测试 性 ， 

(3) 评审 软件 设计 的 可 测试 性 。 

在 编码 阶段 ,依据 需求 阶段 和 设计 阶段 的 要 求 .编码 以 实现 软件 程序 。 对 软件 可 测试 
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性 ,主要 包括 : 
(1) 完成 可 测试 的 构件 并 进行 内 管 测试 ; 
(2) 生成 软件 测试 配套 工具 和 可 重用 框架 ; 
(3) 根据 定义 好 的 可 测试 性 标准 对 软件 程序 进行 代码 检查 。 
在 测试 阶段 ,对 前 面 阶段 的 可 测试 性 措施 以 及 软件 功能 性 和 非 功能 性 需求 进行 测试 。 
对 软件 可 测试 性 ,主要 包括 : 
(1) 定义 可 到 达 的 软件 测试 准则 和 测试 脚本 ; 
(2) 针对 构件 开发 , 设 团 和 使 用 测试 床 和 相关 工具 ; 
(3) 基于 定义 的 准则 对 测试 覆盖 率 进 行 监控 ; 
(4) 验证 ,度量 和 评价 软件 可 测试 性 。 
从 其 内 部 要 素 考 虑 ,可 测试 性 设计 和 实现 主要 体现 在 以 下 6 个 方面 : 
(1) 可 操作 性 方面 : 
| 系统 具有 较 少 缺陷 ; 
@ 没有 缺陷 能 够 阻止 测试 执行 ; 
@ 产品 在 功能 定义 阶段 进行 演化 ; 
@ 可 以 得 到 源 代码 。 
(2) 可 控制 性 方面 : 
@ 测试 环境 可 用 ; 
外 测试 人 员 能 够 直接 控制 变量 ; 
@ 模块 .对 象 或 函数 层 可 以 独立 测试 。 
(3) 简单 性 方面 : 
QO@ 设计 本 身 是 一 致 的 ; 
@ 功能 简单 ; 
@ 结构 简单 ; 
@ 代码 简单 。 
(4) 稳定 性 方面 : 
Q@ 软件 变更 不 频繁 ; 
@ 变更 是 可 控 的 ; 
@ 软件 变更 不 会 使 得 自动 化 测试 失效 。 
(5) 可 理解 性 方面 : 
@ 设计 与 其 他 已 知 产品 类 似 ; 
加 产品 所 基于 的 技术 被 广泛 理解 ; 
@ 内 部 .外 部 和 共享 构件 之 间 的 依赖 性 被 广泛 理解 。 
(6) 可 观察 性 方面 : 
Q@ 每 个 输入 产生 不 一 样 的 输出 ; 
@ 变量 在 执行 过 程 中 是 可 见 或 可 查询 的 ; 
回 影响 输出 的 所 有 因素 是 可 见 的 :不 正确 的 输出 很 容易 被 识别 ; 
@ 能 够 检测 到 内 部 错误 。 
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1.4.3 可 测试 性 度量 与 评估 


一 般 地 , 当 我 们 说 一 个 软件 相 比 于 另 一 个 软件 具有 更 好 的 可 测试 性 ,意味 着 该 软件 更 容 
易 被 测试 。 可 采用 多 种 方法 来 度量 软件 可 测试 性 。 

白 盒 测试 和 黑 盒 测试 是 常用 的 2 种 不 同 的 测试 策略 。 黑 盒 测 试 把 被 测 软件 看 做 一 个 黑 
盒子 ,依据 规格 说 明 设计 测试 用 例 .注入 软件 输入 ,捕获 软件 输出 并 与 期 望 结 果 相 比 对 ,以 判 
断 被 测 软件 的 正确 性 ; 白 盒 测试 把 被 测 软件 看 做 一 个 透明 的 盒子 ,在 分 析 程 序 路 径 .数据 流 、 
控制 流 等 内 部 结构 的 基础 上 ,设计 测试 用 例 和 测试 数据 进行 软件 测试 。 

可 测试 性 的 度量 方法 依据 白 盒 测试 或 黑 盒 测 试 策略 ,大体 上 分 为 2 类 。 

(1) 以 故障 检测 率 为 准则 。 如 果 一 个 软件 在 随机 黑 盒 测试 中 能 够 暴露 故障 ,并 能 对 大 
多 数 故 障 输入 产生 失效 , 则 认为 该 软件 具有 较 高 的 可 测试 性 ;相反 ,在 随机 黑 盒 测试 中 难以 
检测 到 故障 ,对 多 数 故 障 输入 产生 正确 的 输出 , 则 认为 该 软件 的 可 测试 性 较 低 。 这 种 方法 需 
要 事先 已 知 故障 数 。 

(2) 以 测试 覆盖 率 为 准则 。 如 果 一 个 软件 能 够 以 较 少 的 测试 路 径 数目 达到 测试 覆盖 要 
求 , 则 认为 该 软件 具有 较 高 的 可 测试 性 ;相反 地 , 则 认为 该 软件 的 可 测试 性 较 低 。 这 里 假设 
指定 的 测试 覆盖 率 是 可 以 达到 的 。 

应 该 认识 到 ,上 述 两 种 方法 得 到 的 结果 可 能 是 不 一 致 的 。 举 个 例子 ,没有 任何 条 件 或 循 
环 表达 式 的 直线 式 程序 ,如 果 以 测试 覆盖 率 为 准则 , 它 与 具有 复杂 控制 流 的 程序 相 比 ,具有 
更 高 的 可 测试 性 ;但 是 ,如 果 以 故障 检测 率 为 准则 ,直线 式 程序 与 具有 复杂 控制 流 的 程序 相 
比 ,其 可 测试 性 很 可 能 会 更 低 。 


1.5 软件 测试 模型 


软件 开发 活动 是 一 个 过 程 ,遵循 特定 的 生存 周期 模型 。 无 论 什 么 样 的 软件 开发 生存 周 
期 模型 ,软件 测试 都 是 其 中 必 不 可 少 的 环节 .是 贯穿 整个 生存 周期 的 重要 活动 。 本 节 通 过 对 
V 模 型 W 模型 .H 模型 等 常见 模型 的 分 析 , 介 绍 软件 测试 在 不 同 软件 生存 周期 中 的 位 置 和 
起 到 的 作用 。 


1.5.1 YV 模型 


V 模型 最 早 于 20 世纪 80 年 代 后 期 由 Paul Rook 在 软件 开发 瀑布 模型 的 基础 上 提出 ， 
是 最 经 典 和 具有 代表 意义 的 测试 模型 。V 模型 反映 了 软件 测试 活动 与 软件 需求 分 析 和 设 
计 的 关系 ,明确 指出 软件 测试 不 仅仅 是 软件 开发 中 的 一 个 独立 阶段 ,而 应 贯穿 于 整个 软件 开 
发 生存 周期 之 中 。 

V 模型 分 为 左右 两 部 分 .如 图 1-2 所 示 . 左 半 部 分 描述 基本 的 软件 开发 过 程 ,按照 箭头 
的 方向 从 上 到 下 分 为 不 同 的 开发 阶段 ; 右 半 部 分 描述 了 与 开发 相对 应 的 测试 过 程 ,按照 箭头 
的 方向 自 下 而 上 分 为 不 同 的 测试 类 别 。 右 半 部 分 中 的 软件 测试 类 别 与 左 半 部 分 中 的 软件 开 
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发 阶段 有 着 同等 的 重要 性 ,在 形状 上 呈现 V 字形 , 故 称 为 V 模型 。V 模型 中 的 左右 两 部 分 
存在 连通 关系 ,使 得 不 同 的 测试 类 别 与 相应 的 开发 阶段 对 应 ,不 仅 说 明了 要 做 什么 事 , 还 说 
明了 在 什么 时 间 和 怎么 样 来 实施 这 些 任务 。 





图 1-2 V 模型 示意 图 


V 模型 的 主要 不 足 在 于 : 它 把 测试 图 于 软件 开发 活动 之 后 ,对 “尽早 测试 和 不 断 测试 ”的 
原则 体现 不 充分 ; 它 把 不 同类 别 的 测试 与 软件 开发 阶段 一 一 对 应 ,但 在 实际 项 目 中 ,各 级 测试 
与 不 同 开发 阶段 很 难 有 严格 的 对 应 关系 ; 它 容易 使 人 理解 为 测试 就 是 针对 程序 进行 ,缺少 需求 
评审 ,设计 评审 、 代 码 审 查 等 验证 确认 与 静态 测试 内 容 , 有 可 能 导致 需求 分 析 、 概 要 设计 等 早期 
开发 阶段 的 问题 直至 系统 测试 和 验收 测试 才能 被 发 现 ,错过 最 佳 的 缺陷 发 现 和 修复 时 机 。 


1.5.2 W 模型 


W 模型 是 在 V 模型 的 基础 上 .由 Paul Herzlich 在 1999 年 提出 的 。 相 对 于 V 模型 ， 
W 模型 增加 了 各 软件 开发 阶段 中 同步 进行 的 验证 和 确认 活动 。 

W 模型 由 两 个 V 字模 型 组 成 ,如 图 1-3 所 示 , 开 发 过 程 是 一 个 V 字 , 伴 随 的 测试 过 程 是 
另 一 个 V 字 ,两 者 是 并 行 关系 。W 模型 强调 测试 是 伴随 着 整个 软件 开发 周期 的 ,而 且 测试 
对 象 不 仅仅 是 程序 ,还 应 包括 需求 .设计 等 阶段 的 工作 产品 ,也 就 是 说 ,测试 和 开发 是 同步 进 
行 的 。W 模型 有 助 于 尽早 地 、 全 面 地 发 现 问题 。 比 如 ,在 需求 分 析 完 成 后 ,测试 人 员 就 应 该 
参与 到 对 需求 的 验证 和 确认 活动 中 .以 及 时 地 找 出 存在 的 错误 ;同时 ,对 需求 的 测试 也 有 利 
于 了 解 掌握 项 目 情况 和 测试 风险 ,尽早 制定 应 对 措施 。 

W 模型 的 不 足 主 要 在 于 : 把 软件 开发 和 测试 都 看 作 是 串 行 的 活动 ,呈现 出 一 种 线性 关 
系 , 等 上 一 阶段 完全 结束 后 才 可 正式 开始 下 一 阶段 的 工作 ,无 法 支持 迭代 的 开发 模型 ,不 能 
很 好 地 适应 软件 开发 复杂 多 变 的 情况 。 
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详细 设计 V&V 
单元 测试 设计 


图 1-3 W 模型 示意 图 


1.5.3 H 模型 


V 模型 和 W 模型 把 开发 和 测试 看 作 存 在 严格 次 序 的 串 行 活动 ,与 实际 软件 研制 活动 并 
不 相符 。 为 了 克服 V 模型 和 W 模型 的 上 述 不 足 , 人 们 提出 互 模型 ,把 测试 活动 独立 出 来 ， 
分 为 测试 准备 (包括 测试 分 析 ,测试 策划 ,测试 设计 等 ) 和 测试 执行 (包括 测试 执行 .测试 总 结 
评估 等 ) 两 个 阶段 活动 ,并 形成 一 个 与 其 他 流程 (比如 软件 开发 中 的 设计 流程 ) 彼 此 独立 的 流 
程 ,如 图 1-4 所 示 。 
测试 就 绪 点 


测试 准备 GC 测试 执行 测试 流程 


一 一 一 一 一 一 一 一 一 一 一 一 ~ 其 他 流程 
图 1-4 H 模型 示意 图 


I 
Ss 


演示 了 在 整个 开发 周期 中 某 个 时 机 对 应 的 一 次 测试 流程 ,标注 的 其 他 流程 可 以 是 任意 
的 开发 流程 ,比如 分 析 流 程 \ 设 计 流程 或 编码 流程 等 。 整 个 软件 测试 可 以 包含 很 多 这 样 的 测 
试 流程 ,并 且 不 同 的 测试 活动 可 以 是 按照 某 个 次 序 先后 进行 的 :也 可 以 是 反复 的 。 只 要 测试 
条 件 成 熟 了 ,测试 准备 就 绪 了 ,就 可 以 开展 测试 执行 活动 。 

互 模 型 体现 了 测试 流程 的 独立 性 \ 完 整 性 和 过 程 管理 的 重要 性 ,也 体现 了 ”尽早 测试 和 
不 断 测试 ”的 原则 。 
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1.6 软件 测试 级 别 与 测试 类 型 


1.6.1 软件 测试 级 别 


在 最 常见 的 V 模型 和 W 模型 中 ,把 软件 测试 描述 为 单元 测试 .集成 测试 .确认 测试 . 系 
统 测 试 . 验 收 测试 等 5 种 不 同类 别 , 这 也 是 人 们 对 软件 测试 级 别 最 常用 的 划分 方式 。 

按照 GB/T 15532 一 2008( 计 算 机 软件 测试 规范 》, 软 件 测试 分 为 单元 测试 .集成 测试 、 
配置 项 测试 (也 称 软件 合格 性 测试 或 确认 测试 )、 系 统 测试 .验收 测试 等 5 种 测试 类 别 ,可 根 
据 软 件 的 规模 、 类 型 .完整 性 级 别 选择 测试 类 别 。 


1. 单元 测试 

按照 GB/T 11457 一 2006《 信 息 技 术 ”软件 工程 术语 》, 单 元 测试 是 "独立 的 硬件 或 软件 
单元 或 相关 单元 的 测试 ”。 

GB/T 15532 一 2008 指出 ,单元 测试 的 测试 对 象 是 可 独立 编译 或 汇编 的 程序 模块 (或 称 
为 软件 构件 或 在 面向 对 象 设计 中 的 类 ) ,测试 目的 是 检查 每 个 软件 单元 能 否 正 确 地 实现 设计 
说 明 中 的 功能 ,性 能 、 接 口 和 其 他 设计 约束 等 要 求 ,发 现 单元 内 可 能 存在 的 各 种 差错 ,一 般 由 
软件 的 供 方 或 开发 方 组 织 并 实施 。 


2. 集成 测试 

按照 GB/T 11457 一 2006《 信 息 技 术 软件 工程 术语 》, 集 成 测试 是 “把 软件 、 硬 件 部 件 
或 两 者 结合 起 来 进行 的 测试 ,并 测试 以 评价 它们 之 间 的 交互 ”。 

GB/T 15532 一 2008 指出 ,软件 集成 测试 的 对 象 包括 两 种 : 任意 一 个 软件 单元 集成 到 计 
算 机 软件 系统 的 组 装 过 程 ,以 及 任意 一 个 组 装 得 到 的 软件 系统 。 集 成 测试 的 目的 是 检验 软 
件 单元 之 间 、 软 件 单元 和 已 集成 的 软件 系统 之 间 的 接口 关系 ,并 验证 已 集成 软件 系统 是 否 符 
合 设计 要 求 ,一般 由 软件 供 方 组 织 并 实施 ,测试 人 员 与 开发 人 员 应 相对 独立 。 


3. 配置 项 测试 (也 称 软件 合格 性 测试 或 确认 测试 ) 

按照 GB/T 11457 一 2006《 信 息 技 术 ”软件 工程 术语 》. 合 格 性 测试 是 “确定 系统 或 部 件 
是 否 适合 于 操作 使 用 的 测试 行为 ”。 

GB/T 15532 一 2008 指出 ,配置 项 测试 的 对 象 是 软件 配置 项 ,软件 配置 项 是 为 独立 的 配 
署 管 理 而 设计 的 并 且 能 满足 最 终 用 户 功 能 的 一 组 软件 ,配置 项 测试 的 目的 是 检验 软件 配置 
项 与 软件 需求 规格 说 明 的 一 致 性 。 软 件 配置 项 测试 一 般 由 软件 的 供 方 组 织 , 由 独立 于 软件 
开发 的 人 员 实 施 ,软件 开发 人 员 配合 。 如 果 配 置 项 测试 委托 于 第 三 方 实施 ,一 般 应 委托 国家 
认可 的 第 三 方 测试 机 构 。 


4. 系统 测试 

按照 GB/T 11457 一 2006《 信 息 技术 软件 工程 术语 》, 系 统 测 试 是 “在 完整 的 、 集 成 的 
系统 上 的 测试 行为 , 它 用 于 评价 系统 与 规定 的 需求 的 遵从 性 ”。 

GB/T 15532 一 2008 指出 ,系统 测试 对 象 是 完整 的 、 集 成 的 计算 机 系统 ,重点 是 新 开发 
的 软件 配置 项 的 集合 ,系统 测试 的 目的 是 在 真实 系统 工作 环境 下 检验 完整 的 软件 配置 项 能 
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否 和 系统 正确 连接 .并 满足 系统 / 子 系统 设计 文档 和 软件 开发 合同 规定 的 要 求 。 


5. 验收 测试 

按照 GB/T 11457 一 2006《 信 息 技术 软件 工程 术语 》, 验 收 测试 是 “a) 确 定 一 系统 是 否 
符合 其 验收 准则 ,使 客户 能 确定 是 否 接 收 此 系统 的 正式 测试 ;b) 使 用 户 、 客 户 或 其 他 授权 实 
体 确 定 是 否 接 受 系统 或 部 件 的 正式 测试 ”。 

GB/T 15532 一 2008 指出 ,验收 测试 是 以 需 方 为 主 的 测试 ,其 对 象 是 完整 的 、 集 成 的 计 
算 机 系统 。 验 收 测试 的 目的 是 在 真实 的 用 户 ( 或 称 系统 ) 工 作 环 境 下 检验 完整 的 软件 系统 ， 
是 否 满足 软件 开发 合同 (或 软件 需求 规格 说 明 ) 规 定 的 要 求 , 其 结论 是 软件 需 方 确定 是 否 接 
收 该 软件 的 主要 依据 。 验 收 测试 应 由 软件 的 需 方 组 织 , 由 独立 于 软件 开发 的 人 员 实 施 。 如 
果 委 托 第 三 方 实施 ,一 般 应 委托 国家 认可 的 第 三 方 测试 机 构 。 

单元 测试 .集成 测试 .配置 项 测试 .系统 测试 .验收 测试 等 不 同 测试 级 别 或 类 别 的 测试 策 
略 ` 测 试 内 容 ,测试 方法 ,测试 用 例 设计 及 测试 过 程 等 具体 内 容 , 将 在 本 书后 文中 详细 介绍 。 





1.6.2 软件 测试 类 型 


如 1.6.1 节 所 述 , 按 照 测 试 级 别 的 不 同 , 软 件 测试 可 分 为 单元 测试 、 集 成 测试 .确认 测 
试 、 系 统 测试 和 验收 测试 。 软 件 测试 还 有 多 种 其 他 的 分 类 方法 。 比 如 ,从 是 否 执行 程序 的 角 
度 , 软 件 测试 可 以 分 为 静态 测试 和 动态 测试 ;从 是 否 关心 软件 内 部 结构 的 角度 ,软件 测试 可 
分 为 白 盒 测 试 和 黑 盒 测试 ;从 测试 实施 主体 角度 ,软件 测试 可 以 分 为 开发 方 测试 ,用 户 方 测 
试 和 第 三 方 测试 ;从 测试 过 程 的 自动 化 水 平角 度 ,软件 测试 可 以 分 为 人 工 测试 、 半 自动 化 测 
试 和 自动 化 测试 ,等 等 。 

从 软件 特性 和 质量 目标 的 角度 ,软件 测试 可 分 为 功能 测试 .性 能 测试 接口 测试 .人 机 交 
互 界面 测试 .安全 性 测试 等 多 种 不 同 的 测试 类 型 。 


1. 功能 测试 

功能 测试 是 对 软件 需求 规格 说 明 或 设计 文档 中 的 功能 需求 逐 项 进行 的 测试 ,以 验证 其 
功能 是 否 满足 要 求 。 主 要 包括 : 

(1) 用 正常 值 的 等 价 类 输入 数据 值 测试 ; 

(2) 用 非 正常 值 的 等 价 类 输入 数据 值 测试 ; 

(3) 进行 每 个 功能 的 合法 边界 值 和 非法 边界 值 输入 的 测试 ; 

(4) 用 一 系列 真实 的 数据 类 型 和 数据 值 运 行 .测试 超 负荷 .饱和 及 其 他 “最 坏 情况 ”的 结果 ; 

(5) 在 配置 项 测试 时 对 配置 项 控制 流程 的 正确 性 、 合 理性 等 进行 验证 。 


2. 性 能 测试 

性 能 测试 是 对 软件 需求 规格 说 明 或 设计 文档 中 规定 的 性 能 需求 逐 项 进行 的 测试 ,以 验 
证 其 性 能 是 否 满足 要 求 。 主 要 包括 : 

(1) 测试 在 获得 定量 结果 时 程序 计算 的 精确 性 (处 理 精度 ); 

(2) 测试 其 时 间 特 性 和 实际 完成 功能 的 时 间 ( 响 应 时 间 ); 

(3) 测试 为 完成 功能 所 处 理 的 数据 量 ; 

(4) 测试 程序 运行 所 占用 的 空间 ; 


ey 


软件 测试 实用 方法 与 技术 


(5) 测试 其 负荷 潜力 ; 

(6) 测试 配置 项 各 部 分 的 协调 性 ; 

(7) 在 系统 测试 时 测试 软件 性 能 和 硬件 性 能 的 集成 ; 

(8) 在 系统 测试 时 测试 系统 对 并 发 事件 和 并 发 用 户 访问 的 处 理 能 力 。 


3. 接口 测试 

接口 测试 是 对 软件 需求 规格 说 明 或 设计 文档 的 接口 需求 逐 项 进行 的 测试 。 主 要 包括 : 
(1) 测试 所 有 外 部 接口 ,检查 接口 信息 的 格式 及 内 容 ; 

(2) 对 每 一 个 外 部 输入 /输出 接口 必须 做 正常 和 异常 情况 的 测试 ; 

(3) 测试 硬件 提供 的 接口 是 否 便 于 使 用 ; 

(4) 测试 系统 特性 (如 数据 特性 、 错 误 特 性 ,速度 特性 等 ) 对 软件 功能 、 性 能 特性 的 影响 ; 
(5) 对 所 有 内 部 接口 的 功能 ,性 能 进行 测试 。 


4， 人 机 交互 界面 测试 

人 机 交互 界面 测试 是 对 所 有 人 机 交互 界面 提供 的 操作 和 显示 界面 进行 的 测试 ,以 检验 
是 否 满足 用 户 的 要 求 。 主 要 包括 : 

(1) 测试 操作 和 显示 界面 及 界面 风格 与 软件 需求 规格 说 明 中 要 求 的 一 致 性 和 符合 性 ; 

(2) 以 非常 规 操作 、 误 操作 ,快速 操作 来 检验 人 机 界面 的 健壮 性 ; 

(3) 测试 对 错误 命令 或 非法 数据 输入 的 检测 能 力 与 提示 情况 ; 

(4) 测试 对 错误 操作 流程 的 检测 与 提示 ; 

(5) 对 照 用 户 手 册 或 操作 手册 逐条 进行 操作 和 观察 。 


5， 强度 测试 

强度 测试 是 强制 软件 运行 在 不 正常 到 发 生 故 障 的 情况 下 (设计 的 极限 状态 到 超出 极限 
状态 ) ,检验 软件 可 以 运行 到 何 种 程度 的 测试 。 主 要 包括 : 

(1) 提供 最 大 处 理 的 信息 量 ; 

(2) 提供 数据 能 力 的 饱和 实验 指标 ; 

(3) 提供 最 大 存储 范围 (如 常 驻 内 存 、 缓 冲 、 表 格 区 、 临 时 信息 区 ); 

(4) 在 能 力 降级 时 进行 测试 ; 

(5) 在 人 为 错误 (如 寄存 器 数据 跳 变 、 错 误 的 接口 ) 状 态 下 进行 软件 反应 的 测试 ; 

(6) 通过 启动 软件 过 载 安全 装 管 (如 临界 点 警报 、 过 载 溢 出 功能 、 停 止 输入 、 取 消 低 速 设 
备 等 ) 生 成 必要 条 件 , 进 行 计算 过 载 的 饱和 测试 ; 

(7) 需 进行 持续 一 段 规定 的 时 间 ,而 且 连续 不 能 中 断 的 测试 。 


6. 余 量 测试 

余 量 测试 是 对 软件 是 否 达到 需求 规格 说 明 中 要 求 的 余 量 的 测试 。 若 无 明确 要 求 时 ,一 
般 至 少 留 有 20% 的 余 量 。 主 要 包括 : 

(1) 全 部 存储 量 的 余 量 ; 

(2) 输入 /输出 及 通道 的 吞吐 能 力 余 量 ; 

(3) 功能 处 理 时 间 的 余 量 。 


7. 安全 性 测试 
安全 性 测试 是 检验 软件 中 已 存在 的 安全 性 、 安 全 保密 性 措施 是 否 有 效 的 测试 。 测 试 应 
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尽 可 能 在 符合 实际 使 用 的 条 件 下 进行 。 主 要 包括 : ; | 

(1) 对 安全 性 关键 的 软件 部 件 ,必须 单独 测试 安全 性 需求 ; 

(2) 在 测试 中 全 面 检验 防止 危险 状态 措施 的 有 效 性 和 每 个 危险 状态 下 的 反应 ; 

(3) 对 设计 中 用 于 提高 安全 性 的 结构 ,算法 容错、 元 余 及 中 断 处 理 等 方案 ,必须 进行 针 
对 性 测试 ; 

(4) 对 软件 处 于 标准 配置 下 其 处 理 和 保护 能 力 的 测试 ; 

(5) 应 进行 对 异常 条 件 下 系统 /软件 的 处 理 和 保护 能 力 的 测试 (以 表明 不 会 因为 可 能 的 
单个 或 多 个 输入 错误 而 导致 不 安全 状态 ); 

(6) 对 输入 故障 模式 的 测试 ; 

(7) 必须 包含 边界 、 界 外 及 边界 结合 部 的 测试 ; 

(8) 对 0” 穿越“0” 以 及 从 两 个 方向 趋 近 于 “0” 的 输入 值 的 测试 ; 

(9) 必须 包括 在 最 坏 情况 配置 下 的 最 小 输入 和 最 大 输入 数据 率 的 测试 ; 

(10) 对 安全 性 关键 的 操作 错误 的 测试 ; 

(11) 对 具有 防止 非法 进入 软件 并 保护 软件 的 数据 完整 性 能 力 的 测试 ; 

(12) 对 双 工 切换 ,多 机 替换 的 正确 性 和 连续 性 的 测试 ; 

(13) 对 重要 数据 的 抗 非法 访问 能 力 的 测试 。 


8. 恢复 性 测试 

恢复 性 测试 是 对 有 恢复 或 重 兽 功能 的 软件 的 每 一 类 导致 恢复 或 重 兽 的 情况 逐一 进行 的 
测试 ,以 验证 其 恢复 或 重 剖 功能 。 恢 复 性 测试 是 要 证 实在 克服 硬件 故障 后 ,系统 能 否 正 常 地 
继续 进行 工作 , 且 不 对 系统 造成 任何 损害 。 主 要 包括 : 

(1) 探测 错误 功能 的 测试 ; 

(2) 能 否 切换 或 自动 启动 备用 硬件 的 测试 ; 

(3) 在 故障 发 生 时 能 否 保护 正在 运行 的 作业 和 系统 状态 的 测试 ; 

(4) 在 系统 恢复 后 ,能 否 从 最 后 记录 下 来 的 无 错误 状态 开始 继续 执行 作业 的 测试 。 


9. 边界 测试 

边界 测试 是 对 软件 处 在 边界 或 端点 情况 下 运行 状态 的 测试 。 主 要 包括 : 
(1) 软件 的 输入 域 和 输出 域 的 边界 或 端点 的 测试 ; 

(2) 状态 转换 的 边界 或 端点 的 测试 ; 

(3) 功能 界限 的 边界 或 端点 的 测试 ; 

(4) 性 能 界限 的 边界 或 端点 的 测试 ; 

(5) 容量 界限 的 边界 或 端点 的 测试 。 


10. 互 操作 性 测试 

互 操作 性 测试 是 为 验证 不 同 软件 之 间 的 互 操作 能 力 而 进行 的 测试 。 主 要 包括 : 
(1) 同时 运行 两 个 或 多 个 不 同 的 软件 ; 

(2) 软件 之 间 发 生 了 互 操 作 。 

11. 容量 测试 


容量 测试 是 检验 软件 的 能 力 最 高 能 达到 什么 程度 的 测试 。 容 量 测试 一 般 应 测试 到 在 正 
常情 况 下 软件 所 具备 的 最 高 能 力 ,如 响应 时 间或 并 发 处 理 个 数 等 能 力 。 
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12. 安装 性 测试 

安装 性 测试 是 对 安装 过 程 是 否 符合 安装 规程 的 测试 ,以 发 现 安 装 过 程 中 的 错误 。 主 要 
包括 : 

(1) 不 同 配置 下 的 安装 和 外 载 测试 ; 

(2) 安装 规程 的 正确 性 测试 。 





1.6.3 软件 关键 等 级 


在 大 型 软件 系统 中 ,往往 包含 很 多 软件 ,划分 为 不 同 的 软件 配置 项 。 根 据 GB/T 
11457 一 2006《 信 息 技 术 ”软件 工程 术语 》, 所 谓 的 软件 配置 项 是 指 * 为 配置 管理 设计 的 软件 
的 集合 , 它 在 配置 管理 过 程 中 ,作为 单个 实体 对 待 ”。 

为 了 更 加 有 效 地 实施 管理 以 及 工程 上 的 需要 ,人 们 经 常 对 软件 配置 项 进行 分 级 管理 ,对 
不 同等 级 的 软件 配置 项 实施 差异 化 管理 。 影 响 软件 配置 项 关键 等 级 的 因素 包括 软件 配置 项 
在 软件 系统 中 地 位 ,起 到 的 作用 以 及 其 他 相关 因素 等 。 在 航天 测量 控制 系统 中 ,根据 软件 配 
程 项 失效 所 造成 的 危险 的 严重 程度 .危险 发 生 的 概率 、 软 件 对 危险 的 控制 程度 以 及 控制 的 复 
杂 性 和 实时 性 等 ,把 软件 配置 项 分 为 A、B、C.、D 四 个 关键 等 级 。 这 里 所 说 的 危险 , 既 包 括 影 
响 系统 和 人 员 生 命 的 危险 ,也 包括 影响 任务 成 败 的 危险 。 

软件 关键 等 级 的 确定 过 程 按 如 下 5 步 进行 。 

(1) 确定 各 系统 和 各 分 系统 的 所 有 潜在 危险 。 软 件 系统 分 析 与 设计 阶段 应 开展 系统 的 
危险 分 析 , 系 统 危 险 分 析 是 系统 中 各 层次 开展 危险 分 析 的 前 提 和 基础 。 通 过 系统 的 危险 分 
析 , 列 出 系统 所 有 的 潜在 危险 ,包括 危险 的 原因 以 及 针对 危险 原因 的 危险 控制 等 。 系 统 危 险 
分 析 是 确定 软件 关键 等 级 的 前 提 和 基础 。 

(2) 分 析 并 确定 每 一 种 潜在 危险 的 严重 等 级 和 发 生 的 可 能 性 。 和 危险 的 严重 等 级 和 发 生 
的 可 能 性 主要 是 基于 工程 的 判断 得 出 。 和 危险 的 严重 等 级 定义 为 灾难 的 、 严 重 的 一 般 的 、 可 
忽略 的 等 4 级 , 详 见 表 1-1; 危 险 发 生 的 可 能 性 定义 为 非常 可 能 、 很 可 能 ,可 能 、 不 太 可 能 、 几 
乎 不 可 能 等 5 级 , 详 见 表 1-2。 








表 1-1 危险 的 严重 等 级 

















危险 严重 等 级 定义 描述 
灾难 的 | 。 入 员 死记 ;系统 报废 ;基本 任务 失败 
严重 的 | 和 人员 严 重 受伤 + 系统 严重 损坏 :基本 任务 的 主要 部 分 未 完成 
一 般 的 | 人员 轻 度 受伤 ;系统 轻 度 损坏 ;对 完成 任务 有 轻 度 影响 
可 忽略 的 轻 于 轻 度 的 人 员 伤 害 或 系统 损坏 ;执行 任务 中 有 障碍 ,但 不 影响 完成 任务 





表 1-2 危险 发 生 的 可 能 性 级 别 


发 生 的 可 能 性 定义 定义 描述 





非常 可 能 | 危险 将 频繁 发 生 。P>10- 





很 可 能 危险 将 发 生 数 次 。10 一 一 P<10 
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发 生 的 可 能 性 定义 定义 描述 
可 能 | 某 时 候 危 险 很 可 能 发 生 。10-: 一 P<10-: 
不 太 可 能 | 危险 发 生 的 可 能 性 很 小 。10 一 一 P<10- 
几乎 不 可 能 危险 几乎 不 可 能 发 生 。P<10-: 








说 明 : 已 是 危险 发 生 的 概率 。 危 险 发 生 的 可 能 性 可 以 定性 的 表示 ,也 可 以 用 定量 的 概率 来 表示 。 但 它 一 般 是 基于 工 
程 判断 得 出 的 ,而 不 是 基于 确实 的 数字 。 

(3) 确定 系统 风险 指标 。 de ht 
的 系统 风险 指标 ,如 表 1-3 所 示 。 在 确定 资源 分 配 和 考虑 能 否 接 受 某 种 风险 指标 时 ,系统 风 
险 指标 是 一 个 重要 依据 。 最 高 风险 的 危险 (系统 风险 指标 为 "1”) 在 系统 分 析 与 设计 中 是 
允许 存在 的 。 对 于 系统 风险 指标 为 *1” 的 系统 分 析 与 设计 应 进行 重新 设计 以 消除 危险 和 
的 概率 或 使 之 降低 到 可 接受 的 范围 ;系统 风险 指标 为 6” 和 “7” 可 以 不 进行 安全 性 分 析 或 控 
制 ;系统 风险 指标 为 *5” 要 求 最 少 的 安全 分 析 或 控制 ;对 于 系统 风险 指标 为 *2”、“3” 和 ”4”, 所 
要 求 的 安全 分 析 工 作 随 着 系统 风险 指标 的 增高 而 增加 。 


表 1-3 危险 的 系统 风险 指标 


危 队 严 重 等 非常 可 能 很 可 能 | 不 太 可 能 | 几乎 不 可 能 





可 忽略 的 


(4) 确定 软件 的 控制 类 别 。 通 过 系统 危险 分 析 , 列 出 系统 所 有 的 潜在 危险 ,包括 危险 自 
原因 以 及 针对 危险 原因 的 危险 控制 等 。 其 中 有 一 些 软 件 就 是 直接 导致 危险 的 原因 ,而 有 
软件 则 是 用 来 控制 缓解 或 检测 危险 的 。 软 件 系统 危险 分 析 的 目的 就 是 要 将 这 些 与 软件 相 
关 的 危险 以 及 与 这 些 危 险 相 关 的 软件 标识 出 来 。 对 于 这 些 标 识 出 来 的 软件 要 逐一 确定 其 控 
制 类 别 。 软 件 的 控制 类 别 与 软件 对 系统 的 控制 程度 、 控 制 的 复杂 性 和 实时 性 等 有 关 。 软 件 
的 控制 类 别 定义 为 4 类 ,详细 定义 见 表 1-4。 

表 1-4 软件 的 控制 类 别 











软件 控制 类 别 描 述 
| 软件 对 安全 关键 功能 进行 部 分 或 全 部 自主 控制 
I 2 | 包含 多 个 子 系统 、 交 互 作用 的 并 行 处 理 嚣 或 多 个 接口 的 复杂 系统 





3 | 有 一 些 或 全 部 安全 关键 功能 是 时 间 关 键 的 


控制 危险 ,但 是 其 他 安全 系统 可 以 进行 部 分 缓解 
检测 危险 ,需要 采取 安全 措施 时 通知 操作 员 


I 2 | 包含 少量 子 系统 和 (或 ) 一 些 接口 的 中 等 复杂 系统 ,无 并 行 处 理 
关 时 间 要 求 , 但 是 不 会 超过 合 

























到/ 
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软件 控制 类 别 描 述 


若 软件 发 生 故 障 , 则 有 一 个 或 若干 个 缓解 系统 防止 危险 发 生 
提供 元 余 的 安全 关键 信息 资源 

















严 2 | 稍微 复杂 的 系统 , 仅 包含 有 限 数目 的 接口 
3 | 缓解 系统 能 在 任何 临界 时 间 内 进行 响应 
1 对 危险 无 控制 
不 为 操作 员 提 供 安全 关键 数据 
NW 2 | 仅 带 2 一 3 个 子 系统 的 简单 系统 , 仅 包含 少量 接口 





3 | 没有 临界 时 间 要 求 
注 : 每 个 软件 控制 类 别 有 3 种 描述 ,它们 之 间 是 “或 ”的 关系 , 即 只 要 符合 1 种 ,就 可 以 确定 。 
(5) 确定 每 个 软件 的 关键 等 级 。 根 据 每 个 软件 的 控制 类 别 和 系统 风险 指标 确定 每 个 软 
件 的 关键 等 级 。 软 件 关 键 等 级 分 为 A、B、C、D 四 个 等 级 ,详细 定义 见 表 1-5。 
表 1-5 软件 的 关键 等 级 











软件 控制 类 别 





* 对 该 软件 关键 等 级 的 确定 应 仔细 分 析 。 若 某 个 软件 有 多 个 等 级 , 则 按 其 中 最 高 的 等 级 确定 。 


1.7 软件 测试 标准 规范 


1.7.1 相关 标准 概述 


与 在 工程 技术 领域 一 样 ,标准 在 信息 技术 和 软件 工程 领域 也 发 挥 着 巨大 的 作用 。 在 国 
家 标准 化 管理 委员 会 .ISO 以 及 IEEE 的 网 站 上 .能 够 查询 到 大 量 的 软件 测试 相关 标准 ,其 
中 有 直接 涉及 软件 测试 的 ,更 多 的 是 信息 技术 、 软 件 工程 或 软件 质量 等 方面 与 软件 测试 相关 
的 标准 。 主 要 包括 以 下 25 种 。 

(1) GB/T 8566 一 2007《 信 息 技术 软件 生存 周期 过 程 》 本 标准 修改 采用 国际 标准 
ISO/IEC 12207: 1995《 信 息 技 术 软件 生成 周期 过 程 》 和 ISO/IEC 12207: 1995/Amd. 1: 
2002 以 及 ISO/IEC 12207: 1995/Amd. 2: 2004( 英 文 版 ) 。 本 标准 为 软件 生存 周期 过 程 建 
立 了 一 个 公共 框架 :以 供 软件 产业 界 使 用 。 它 包含 在 含有 软件 的 系统 、 独 立 软件 产品 和 软件 
服务 的 获取 期 间 以 及 在 软件 产品 的 供应 、 开 发 .运行 和 维护 期 间 需 应 用 的 过 程 、 活 动 和 任务 。 
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(2) GB/T 8567 一 2006《 计 算 机 软件 文档 编制 规范 》。 本 标准 是 GB/T 8567 一 1988《 计 
算 机 软件 产品 开发 文件 编制 指南 》 的 修订 版 。 主 要 对 软件 的 开发 过 程 和 管理 过 程 应 编制 的 
主要 文档 及 其 编制 的 内 容 、 格 式 规 定 了 基本 要 求 。 

(3) GB/T 9385 一 2008《 计 算 机 软件 需求 说 明 编制 指南 )。 本 标准 给 出 了 软件 需求 规格 
说 明 的 编制 要 求 ,描述 了 一 份 好 的 软件 需求 规格 说 明 的 内 容 和 质量 ,并 在 附录 中 给 出 了 一 些 
软件 需求 规格 说 明 的 提纲 示例 。 

(4) GB/T 9386 一 2008( 计 算 机 软件 测试 文件 编制 规范 》。 本 标准 规定 了 一 组 基本 的 计 
算 机 软件 测试 文档 的 格式 和 内 容 要 求 , 适 用 于 计算 机 软件 生存 周期 全 过 程 。 

(5) GB/T 11457 一 2006《 软 件 工程 术语 》。 本 标准 定义 软件 工程 领域 中 通用 的 术语 , 适 
用 于 软件 开发 .使 用 维护 、 科 研 .教学 和 出 版 等 方面 。 

(6) GB/T 14394 一 2008《 计 算 机 软件 可 靠 性 和 可 维护 性 管理 》。 本 标准 规定 了 软件 产 
品 在 其 生存 周期 内 如 何 选 择 适当 的 软件 可 靠 性 和 可 维护 性 管理 要 求 ,并 指导 软件 可 靠 性 大 
纲 和 可 维护 性 大 纲 的 制定 和 实施 。 

(7) GB/T 15532 一 2008《 计 算 机 软件 测试 规范 》。 本 标准 替代 了 GB/T 15532 一 1995 
《计算 机 软件 单元 测试 ?。 本 标准 规定 了 计算 机 软件 生存 周期 内 各 类 软件 产品 的 基本 测试 方 
法 、. 过 程 和 准则 。 

(8) GB/T 16260. 1 一 2006《 软 件 工程 ”产品 质量 第 1 部 分 : 质量 模型 )。 本 标准 等 同 
采用 ISO/IEC 9126-1: 2001《 软 件 工 程 ” 产 品质 量 第 1 部 分 : 质量 模型 ,描述 了 关于 软 
件 产品 质量 的 两 部 分 模型 : 内 部 质量 和 外 部 质量 、 使 用 质量 。 

(9) GB/T 16260. 2 一 2006( 软 件 工程 ”产品 质量 第 2 部分: 外 部 度量 )。 本 标准 等 同 
采用 ISO/IEC 9126-2: 2003《 软 件 工程 ”产品 质量 第 2 部 分 : 外 部 度量 》 定 义 了 依据 
GB/T 16260. 1 一 2006 标准 定义 的 特性 和 子 特 性 来 定量 测量 软件 外 部 质量 的 外 部 度量 。 

(10) GB/T 16260. 3 一 2006《 软 件 工程 ”产品 质量 第 3 部 分 : 内 部 度量 )。 本 标准 等 
同 采用 ISO/IEC 9126-3: 2003《 软 件 工程 ”产品 质量 第 3 部 分 : 内 部 度量 》, 定 义 了 依据 
GB/T 16260. 1 一 2006 标准 定义 的 特性 和 子 特性 来 定量 测量 软件 内 部 质量 的 内 部 度量 。 

(11) GB/T 16260.4 一 2006《 软 件 工程 ”产品 质量 第 4 部 分 : 使 用 质量 的 度量 》。 本 
标准 等 同 采用 ISOVIEC 9126-4: 2004《 软 件 工程 ”产品 质量 第 4 部 分 : 使 用 质量 的 度 
量 》, 为 GB/T 16260. 1 一 2006 中 规定 的 质量 特性 定义 了 使 用 质量 的 度量 。 

(12) GB/T16680 一 1996《 软 件 文档 管理 指南 )。 本 标准 非 等 效 采 用 国际 标准 ISO/IEC TR 
9294: 1990《 信 息 技 术 ”软件 文档 管理 指南 》, 为 那些 对 软件 或 基于 软件 的 产品 的 开发 负 有 职责 
的 管理 者 提供 软件 文档 的 管理 指南 .目的 是 协助 管理 者 在 他 们 的 机 构 中 产生 有 效 的 文档 。 

(13) GB 17859 一 1999《 计 算 机 信息 系统 安全 保护 等 级 划分 准则 》。 本 标准 适用 于 计算 
机 信息 系统 安全 保护 技术 能 力 等 级 的 划分 。 本 标准 规定 了 计算 机 信息 系统 安全 保护 能 力 的 
五 个 等 级 ,由 低 至 高 分 别 为 : 用 户 自主 保护 级 、 系 统 审计 保护 级 、 安 全 标记 保护 级 ,结构 化 保 
护 级 .访问 验证 保护 级 。 

(14) GB/T 18221 一 2000《 信 息 技术 程序 设计 语言 .环境 与 系统 软件 接口 ”独立 于 请 
言 的 数据 类 型 )》。 本 标准 等 同 采用 国际 标准 ISO/IEC 11404: 1996《 信 息 技术 ”程序 设计 语 
言 、 环 境 与 系统 软件 接口 ”独立 于 语言 的 数据 类 型 》。 本 标准 规定 了 程序 设计 语言 和 软件 接 
口中 通用 的 一 批 数据 类 型 的 术语 和 共享 语义 , 称 之 为 独立 于 语言 (LI 的 数据 类 型 。 
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(15) GB/T 18234 一 2000《 信 息 技术 CASE 工具 的 评价 与 选择 指南 》。 本 标准 等 同 采 
用 国际 标准 ISO/IEC 14102: 1995《 信 息 技 术 CASE 工具 的 评价 与 选择 指南 》, 定 义 了 用 于 
对 某 个 CASE 工具 进行 技术 评价 和 最 终 选 择 的 一 系列 过 程 及 一 组 结构 化 的 CASE 工具 
特性 。 

(16) GB/T 18491. 1 一 2001《 信 息 技 术 软件 测量 ”功能 规模 测量 第 1 部分: 概念 定 
义 》。 本 标准 等 同 采用 国际 标准 ISO/IEC 14143. 1: 1998《 信 息 技术 ”软件 测量 ”功能 规模 
测量 第 1 部分: 概念 定义 》, 定 义 了 功能 规模 测量 (FSM) 的 主要 概念 ,描述 了 应 用 FSM 方 
法 的 一 般 原则 。 

(17) GB/T 18492 一 2001《 信 息 技术 系统 及 软件 完整 性 级 别 》。 本 标准 等 同 采 用 国际 
标准 ISO/IEC 15026: 1998《 信 息 技术 系统 及 软件 完整 性 级 别 》, 定 义 了 与 完整 性 级 别 相 
关 的 概念 ,定义 了 确定 完整 性 级 别 和 软件 完整 性 需求 的 过 程 ,并 提出 对 每 个 过 程 的 需求 。 

(18) GB/T 18905.1 一 2002 软 件 工程 ”产品 评价 ”第 1 部 分 : 概述 )》。 本 标准 等 同 采 
用 国际 标准 ISO/IEC 14598-1: 1999《 信 息 技术 软件 产品 评价 第 1 部 分 : 概述 》( 英 文 
版 )。 本 标准 介绍 了 GB/T 18905 的 其 他 部 分 的 概述 ,给 出 了 技术 术语 ,解释 了 GB/T 18905 
与 ISO/IEC 9126 标准 中 质量 模型 的 关系 。 

(19) GB/T 18905. 2 一 2002《 软 件 工程 ”产品 评价 ”第 2 部 分 : 策划 和 管理 》。 本 标准 
等 同 采用 国际 标准 ISO/IEC 14598-2: 2000《 软 件 工程 ”产品 评价 ”第 2 部 分 : 策划 和 管 
理 )( 英 文 版 ) ,详细 地 提供 了 有 关 软 件 产品 评价 的 策划 和 管理 需求 。 

(20) GB/T 18905. 3 一 2002《 软 件 工程 ”产品 评价 ”第 3 部 分 : 开发 者 用 的 过 程 》 本 
标准 等 同 采用 国际 标准 ISO/IEC 14598-3 : 2000《 软 件 工程 ”产品 评价 ”第 3 部 分 : 开发 者 
用 的 过 程 光 英文 版 ), 适 用 于 所 有 需要 严格 要 求 过 程 的 软件 开发 活动 , 供 软 件 开 发 期 间 使 用 。 

(21) GB/T 18905. 4 一 2002《 软 件 工程 ”产品 评价 ”第 4 部分: 需 方 用 的 过 程 》 本 标 
准 等 同 采用 国际 标准 ISO/IEC 14598-4: 1999《 软 件 工 程 ”产品 评价 第 4 部 分 : 需 方 用 的 
过 程 )( 英 文 版 ) ,包含 了 在 获取 现货 软件 产品 、 定 制 的 软件 产品 或 修改 现 有 的 软件 产品 时 ,对 
软件 产品 质量 进行 系统 地 测量 ,评估 和 评价 的 需求 建议 和 指南 。 

(22) GB/T 18905. 5 一 2002《 软 件 工程 ”产品 评价 ”第 5 部 分 : 评价 者 用 的 过 程 》 本 
标准 等 同 采用 国际 标准 ISO/IEC 14598-5: 1999《 软 件 工程 ”产品 评价 ”第 5 部 分 : 评价 者 
用 的 过 程 )( 英 文 版 ), 定 义 了 分 析 各 类 软件 产品 的 评价 需求 ,规定 、 设 计 和 实施 评价 ,并 对 评 
价 做 出 结论 所 需 的 各 种 活动 。 

(23) GB/T 18905. 6 一 2002《 软 件 工程 ”产品 评价 ”第 6 部 分 : 评价 模块 的 文档 编制 》。 
本 标准 等 同 采用 国际 标准 ISO/IEC 14598-6: 2001《 软 件 工 程 ” 产 品评 价 ” 第 6 部 分 : 评价 
模块 的 文档 》( 英 文 版 ) ,定义 了 用 于 描述 评价 模块 的 文档 编制 的 结构 和 内 容 。 

(24) GB/Z 18914 一 2002《 信 息 技术 软件 工程 CASE 工具 的 采用 指南 》。 本 标准 等 同 
采用 国际 标准 ISO/IEC TR 14471: 1999( 英 文 版 ) ,阐述 了 针对 CASE 工具 的 产品 评价 、 选 
择 和 采用 方面 的 问题 ,是 对 涉及 这 些 问 题 一 般 方面 的 有 关 国 家 标准 的 补充 。 

(25) GB/T 19000 一 2008《 质 量 管理 体系 ”基础 和 术语 》。 本 标准 等 同 采用 ISO 9000: 
2005《 质 量 管理 体系 ”基础 和 术语 ). 是 GB/T 19000 族 的 核心 标准 之 一 .表述 了 构成 GB/T 
19000 族 标准 主体 内 容 的 质量 管理 体系 的 基础 ,并 定义 了 相关 的 术语 。 
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1.7.2 GB/T 9386 一 2008《 计 算 机 软件 测试 文档 编制 规范 》 


GB/T 9386 一 2008《 计 算 机 软件 测试 文档 编制 规范 ) 描 述 了 一 组 与 软件 测试 实施 方面 有 
关 的 基本 测试 文档 ,规定 了 各 个 测试 文档 的 目的 .格式 和 内 容 。 这 些 测试 文档 包括 测试 计 
划 、 测 试 说 明 ( 包 括 测试 设计 说 明 、 测 试用 例 说 明和 测试 规程 说 明 ) 和 测试 报告 (包括 测试 项 
传递 报告 .测试 日 志 、 测 试 事件 报告 和 测试 总 结 报告 ) 等 。 

GB/T 9386 一 2008 是 在 GB/T 9386 一 1988 的 基础 上 进行 的 第 一 次 修订 。 与 1988 版 
相 比 ,2008 版 标准 的 名 称 和 核心 内 容 都 没有 改变 ,主要 是 增加 了 10 条 测试 术语 的 定义 ， 
调整 了 部 分 章节 编排 方式 ,扩充 了 部 分 内 容 , 并 增加 了 2 个 作为 资料 性 附录 的 文档 编写 
示例 。 

GB/T 9386 一 1988 是 基于 IEEE Std 829 一 1983 Standard for Software Test 
Documentation 编制 的 ,而 IEEE Std 829 一 1983 已 被 IEEE Std 829 一 2008 Standard for 
Software and System Test Documentation 所 替代 。 目 前 GB/T 9386 中 尚未 体现 IEEE Std 
829 一 2008 对 IEEE Std 829 一 1983 的 修订 内 容 。 





1.7.3 GB/T 15532 一 2008《 计 算 机 软件 测试 规范 》 


GB/T 15532 一 2008《 计 算 机 软件 测试 规范 ) 规 定 了 计算 机 软件 生存 周期 内 各 类 软件 产 
品 的 基本 测试 方法 、 过 程 和 准则 。GB/T 15532 一 2008 对 单元 测试 .集成 测试 .配置 项 测试 
(也 称 软件 合格 性 测试 或 确认 测试 ) 、 系 统 测试 和 验收 测试 等 5 种 测试 类 别 作 了 详细 描述 ,每 
种 测试 类 别 按照 测试 对 象 和 目的 ,测试 的 组 织 和 管理 .技术 要 求 、 测 试 内 容 、 测 试 环境 、 测 试 
方法 、 准 入 条 件 \ 准 出 条 件 、 测 试 过 程 和 输出 文档 等 条 目 进 行 说 明 。 

GB/T 15532 一 2008 计 算 机 软件 测试 规范 ) 替 代 了 GB/T 15532 一 1995《 计 算 机 软件 单 
元 测试 ?。GB/T 15532 一 1995 是 基于 IEEE std 1008 一 1987 Standard for Software Unit 
Testing 编制 的 ,GB/T 15532 一 2008 对 GB/T 15532 一 1995 进行 了 全 面 扩充 。 两 个 版 本 所 
描述 的 范围 差异 很 大 ,2008 版 修改 了 标准 的 名 称 , 对 典型 的 软件 测试 过 程 提出 了 全 面 的 规 
范 要 求 ,从 章节 编排 到 规范 内 容 与 1995 版 相 比 有 很 大 的 发 展 。 


1.7.4 GB/T 25000.51 一 2010《 软 件 工程 软件 产品 质量 要 求 和 评价 
(SQuaRE) 商 业 现 货 (COTS) 软 件 产品 的 质量 要 求 和 测试 细则 》 


GB/T 25000. 51 一 2010《 软 件 工程 软件 产品 质量 要 求 和 评价 (SQuaRE) 商 业 现 货 
(COTS) 软 件 产品 的 质量 要 求 和 测试 细则 ) 为 软件 特别 是 商业 现货 (COTS) 软 件 规定 了 基本 
的 质量 要 求 和 测试 方法 ,以 便于 软件 的 供应 、 选 择 、 采 购 和 测试 。 

COTS 软件 产品 是 一 种 打包 出 售 的 现货 产品 ,典型 情况 是 .这 种 软件 产品 与 其 用 户 文 档 
集 一 起 预先 包装 好 出 售 。 需 方 对 其 特征 和 其 他 质量 没有 任何 影响 ,包装 封面 上 提供 出 的 信 
息 常常 是 制造 商 或 营销 组 织 能 与 需 方 或 用 户 交 流 的 唯一 手段 。 因 此 ,把 实质 性 信息 提供 给 
需 方 使 其 能 按 自 己 需要 来 评价 COTS 软件 产品 的 质量 是 必要 的 。 
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由 于 COTS 软件 产品 可 能 要 在 各 种 环境 中 运行 ,并 且 用 户 是 在 没有 机 会 与 类 似 产 品 作 
性 能 比较 的 情况 下 就 作出 选择 ,因此 选用 高 质量 的 COTS 软件 产品 是 极其 重要 的 。 供 方 需 
要 一 种 方式 以 确保 COTS 软件 产品 给 予 用 户 服 务 信用 。 一 些 供 方 可 能 选择 第 三 方 的 评价 
或 认证 ,以 协助 其 提供 这 种 信用 。 当 用 户 要 求 确保 避免 业务 或 安全 做 关 的 风险 时 ,这 种 保证 
可 能 需要 由 用 户 在 采购 后 选用 特定 的 技术 来 处 置 。 本 标准 宗旨 并 不 在 对 COTS 规定 最 低 
限度 的 业务 或 安全 依 关 的 质量 要 求 ,不 过 是 给 出 了 资料 性 指南 。 

GB/T 25000. 51 一 2010 是 GB/T 17544 一 1998( 信 息 技术 软件 包 质 量 要 求 和 测试 》 的 修 
订 版 。 其 修订 的 目的 是 为 了 与 SQuaRE 系列 标准 保持 一 致 。 本 标准 与 GB/T 17544 一 1998 
的 差异 主要 是 : 对 结构 作 了 调整 和 修改 ,GB/T 17544 一 1998 的 篇 幅 共 4 章 3 个 附录 ,新 版 
标准 共 7 章 3 个 附录 和 1 个 参考 文献 ;对 内 容 进行 了 修改 ,对 适用 范围 作 了 扩充 。 


1.7.5 ISO/IEC 29119 Software Testing 


目前 ,现行 的 直接 涉及 软件 测试 的 国际 标准 或 国外 先进 标准 主要 有 : 由 电气 和 电子 工 
程 师 协 会 IEEE (Institute of Electrical and Electronics Engineers) 发 布 的 IEEE Std 829 一 
2008 Standard for Software and System Test Documentation 和 IEEE Std 1008 一 1997 
(R2002) Standard For Software Unit Testing， 以 及 由 英国 标准 协会 BSI (British 
Standards Institution) 发 布 的 BS 7925-1 Vocabulary of Terms in Software Testing 与 BS 
7925-2 Software Component Testing Standard 。 

最 新 的 国际 标准 ISO/IEC 29119 Software Testing 已 发 布 ,该 标准 由 国际 标准 化 组 织 
ISO(International Organization for Standardization) 及 国际 电工 委员 会 IEC(International 
Electrotechnical Commission) 组 织 制 定 ,由 ISO/IEC JTC1/SC7/WG26 负责 。ISO/IEC 
29119 Softrware Testing 由 5 部 分 组 成 ,如 图 1-5 所 示 , 包 括 : 








ISO 12207 
ISO 15288 












IEEE 1008 IEEE 829 








BS 7925-2 


图 1-5 ISO/IEC 29119 的 组 成 


(1) ISO/IEC 29119-1: Concepts 8& Definitions.2013 年 9 月 发 布 ; 
(2) ISO/IEC 29119-2: Test Processes .2013 年 9 月 发 布 ; 
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(3) ISO/IEC 29119-3: Test Documentation,，2013 年 9 月 发 布 ; 
(4) ISO/IEC 29119-4: Test Techniques ,2015 年 12 月 发 布 ; 
(5) ISO/TEC 29119-5: Keyword-Driven Testing ,2016 年 11 月 发 布 。 





1. ISO/IEC 29119-1 概念 与 术语 

ISO/IEC 29119-1 介绍 了 29119 系列 标准 中 使 用 的 术语 ,提供 了 概念 应 用 的 范例 ,目的 
是 方便 于 对 整个 29119 系列 标准 的 理解 和 使 用 。 本 标准 替代 BS 7925-1 Vocabulary of 
Terms in Software Testing 。 

ISO/IEC 29119-1 的 主要 章节 内 容 包括 : 

(1) 软件 测试 介绍 ; 

(2) 组 织 和 项 目 中 的 软件 测试 ; 

(3) 软件 生存 周期 中 的 一 般 测试 过 程 ; 

(4) 基于 风险 的 测试 ; 

(5) 测试 子 过 程 ; 

(6) 测试 实践 ， 

(7) 测试 中 的 自动 化 ; 

(8) 缺陷 管理 ; 

(9) 测试 在 验证 与 确认 中 的 角色 .指标 与 度量 .不同 生存 周期 模型 中 的 测试 。 


2. ISO/IEC 29119-2 测试 过 程 

ISOVIEC 29119-2 定义 了 一 个 能 用 于 任何 软件 开发 生存 周期 的 通用 测试 过 程 模型 ,该 
过 程 模型 由 组 织 级 测试 (例如 : 组 织 级 测试 方针 、 组 织 级 测试 策略 等 ) ,测试 管理 ,动态 测试 
等 3 个 层次 组 成 ,如 图 1-6、 图 1-7 和 图 1-8 所 示 。 











图 1-6 测试 过 程 模型 


ee 
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测试 管理 过 程 











图 1-7 测试 管理 过 程 


测试 管理 过 程 





| 测试 计划 | | 









动态 测试 过 程 





试 环 
准备 报告 





注 : 在 工程 实践 中 ， 该 过 程 很 可 能 是 循环 递 进 的 ， 而 不 是 顺序 执行 的 。 


图 1-8 动态 测试 过 程 


3. ISO/IEC 29119-3 测试 文档 

ISO/ITEC 29119-3 的 目的 是 定义 覆盖 整个 软件 测试 生存 周期 的 测试 文档 模板 。 每 个 模 
板 可 定制 ,以 满足 不 同 组 织 在 标准 实施 时 的 独特 需求 以 及 支持 不 同 的 软件 开发 生存 周期 模 
型 。 所 有 模板 都 与 ISO/IEC 29119-2 中 定义 的 测试 过 程 相 匹配 ,并 可 在 测试 过 程 的 应 用 中 
得 到 。 本 标准 替代 IEEE 829 。 

ISOVIEC 29119-3 中 定义 的 文档 主要 包括 : 
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(1) 组 织 级 测试 过 程 文档 ,包括 测试 方针 、 组 织 级 测试 策略 等 ; | 

(2) 测试 管理 过 程 文档 ,包括 测试 计划 ( 含 测 试 策略 ) 、 测 试 状态 报告 ,测试 完成 情况 报 
告 等 

(3) 动态 测试 过 程 文档 ,包括 测试 设计 说 明 ,测试 用 例 说 明 ,测试 规程 说 明 ,测试 数据 需 
求 说 明 ,测试 数据 就 绪 报 告 .测试 环境 需求 说 明 ` 测 试 环 境 就 绪 报告 .测试 实测 记录 测试 总 
结 报告 .测试 执行 日 志 、 测 试问 题 报告 等 。 

4. ISO/IEC 29119-4 测试 技术 

ISOVIEC 29119-4 的 目的 是 定义 一 个 覆盖 软件 测试 技术 (或 称 测 试用 例 设 计 技 术 或 测 
试 方法 ) 的 国际 标准 ,这 些 测试 技术 可 用 于 任何 组 织 或 软件 开发 生存 周期 模型 中 的 测试 设计 
与 实现 阶段 。 该 部 分 将 以 BS 7925-2 为 基础 编制 。 

该 标准 包含 的 测试 技术 主要 有 : 

(1) 基于 需求 的 测试 技术 : 等 价 类 划分 、 分 类 树 方法 、 边 界 值 分 析 、 状 态 转 换 测试 决策 
表 测 试 . 因 果 图 分 析 、 语 法 测试 .组 合 测试 ,情景 图 测试 .随机 测试 。 

(2) 基于 结构 的 测试 技术 : 语句 测试 分 支 测 试 判断 测试 条 件 测试 数据 流 测试 。 

(3) 基于 经 验 的 测试 技术 : 错误 猜测 。 

标准 给 出 了 各 种 测试 技术 的 覆盖 率 度量 指标 。 另 外 ,该 标准 还 给 出 一 些 测试 类 型 的 资 
料 性 定义 ,以 及 如 何在 这 些 测 试 类 型 中 应 用 上 述 测 试 技术 的 示例 。 测 试 类 型 包括 可 用 性 测 
试 .可 靠 性 测试 .安全 性 测试 .稳定 性 测试 .可 移植 性 测试 .性 能 测试 (例如 负载 测试 .压力 测 
试 、 强 度 测试 )、 可 维护 性 测试 .本 地 化 测试 安装 性 测试 、 互 操作 性 测试 、 容 灾 测 试 ,恢复 性 测 
试 等 。 


5. ISO/IEC 29119-5 关键 字 驱 动 测试 

ISOVIEC 29119-5 的 目的 是 定义 一 个 支持 关键 字 驱 动 测试 的 国际 标准 。 关 键 字 驱动 测 
试 是 一 种 利用 事先 定义 好 的 关键 字 集合 描述 测试 用 例 的 方法 。 关 键 字 描述 了 执行 测试 用 例 
特定 步骤 的 一 系列 操作 的 名 称 。 通 过 使 用 关键 字 而 不 是 自然 语言 描述 测试 步骤 ,更 易于 测 
试用 例 的 理解 ,维护 和 自动 化 执行 。 

该 标准 已 于 2016 年 11 月 发 布 .主要 包括 如 下 内 容 : 

(1) 关键 字 驱 动 测试 简介 ,主要 介绍 关键 字 驱 动 测试 的 优势 ,关键 字 是 如 何 被 分 层 组 织 
的 ,关键 字 的 一 般 类 型 以 及 如 何 与 数据 建立 关联 等 ; 

(2) 关键 字 驱 动 测试 应 用 ,讨论 关键 字 怎 样 被 识别 ,如 何 被 用 于 组 成 测试 用 例 , 维 护 已 
定义 的 关键 字 集 合 应 注意 什么 事项 ,以 及 关键 字 驱 动 测试 和 数据 驱动 测试 为 什么 是 相关 
的 等 ; 

(3) 角色 与 任务 .描述 关键 字 驱 动 测试 中 的 角色 及 其 任务 .项 目 组 成 员 可 根据 其 与 任务 
相 匹 配 的 资质 担任 一 个 或 多 个 角色 ; 

(4) 关键 字 驱 动 测试 框架 ,关键 字 驱 动 测试 可 被 由 诸如 商业 工具 、 个 人 脚本 和 文档 等 所 
构成 的 框架 来 支撑 ,讨论 一 个 适当 的 关键 字 驱 动 测试 框架 是 如 何 被 构建 的 ,其 哪些 性 质 是 必 
须 的 .哪些 是 有 益 的 ; 

(5) 数据 交互 ,介绍 在 关键 字 驱 动 测试 工具 之 间 需 要 交互 哪些 数据 ,给 出 一 种 数据 格式 
描述 。 
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1.8 软件 测试 人 员 能 力 素质 要 求 


人 们 甚至 部 分 软件 测试 从 业者 对 软件 测试 经 常 存在 的 4 种 错误 观点 。 

(1) 软件 测试 不 可 能 发 现 所 有 的 错误 , 没 必 要 较真 。 软 件 测试 确实 不 容易 发 现 软件 中 
存在 的 全 部 错误 ,但 是 软件 测试 发 现 的 错误 一 般 都 是 最 容易 发 生 的 错误 ,并 且 即 使 只 排除 了 
几 个 错误 ,就 可 能 会 避免 巨大 的 损失 , 带 来 可 观 的 回报 。 

(2) 软件 测试 工作 琐碎 而 枯燥 ,没有 创造 性 。 软 件 测试 需要 逐步 逐个 地 梳理 测试 需求 ， 
对 每 个 测试 需求 分 解 若 干 个 测试 项 ,对 每 个 测试 项 设计 若干 个 测试 用 例 , 然 后 要 准备 详细 的 
测试 数据 ,逐个 地 执行 测试 用 例 ,记录 测 试 实际 结果 ,分 析 其 与 期 望 结果 的 一 致 性 等 ,工作 确 
实 比较 琐碎 ,但 是 无 论 是 测试 需求 的 梳理 ,测试 用 例 的 设计 还 是 测试 结果 的 分 析 , 都 需要 测 
试 人 员 具 有 创造 性 才能 更 好 更 高 效 地 完成 测试 工作 。 

(3) 软件 测试 人 员 了 解 的 软件 背景 知识 没有 设计 人 员 或 开发 人 员 人 掌握 的 更 多 更 深 , 缺 
少 自信 心 。 好 的 软件 测试 是 测试 技术 .背景 知识 和 测试 经 验 的 完美 结合 ,好 的 测试 人 员 能 够 
综合 各 种 技能 多 快 好 省 地 发 现 软件 缺陷 ,最 大 限度 地 提高 测试 效果 和 效率 ,能 够 创造 巨大 的 
价值 。 

(4) 软件 测试 工作 就 是 给 人 挑 毛病 的 ,容易 招 人 讨厌 。 软件 测试 是 站 在 委托 方 的 角度 ， 
努力 发 现 软件 中 存在 的 问题 ,最 大 程度 地 提升 软件 质量 ,保证 软件 在 最 终 用 户 手中 少 出 问 
题 ,事实 上 也 是 为 开发 方 挽回 或 减少 损失 。 另 外 ,软件 测试 对 事 不 对 人 ,发 现 错误 并 不 针对 
编程 人 员 , 而 是 尽量 对 整个 软件 产品 有 益 , 测 试 人 员 和 编程 开发 人 员 的 立场 从 本 质 上 是 一 
致 的 。 

在 对 软件 测试 有 正确 认识 的 基础 上 .软件 测试 人 员 的 能 力 素 质 模 型 主要 包括 如 下 4 个 
方面 。 

(1) 良好 的 沟通 能 力 。 由 于 工作 性 质 的 需要 ,软件 测试 人 员 需 要 经 常 与 用 户 和 开发 方 、 
技术 或 非 技 术 人 员 等 不 同类 型 人 员 打 交道 ,必须 具备 良好 的 与 人 沟通 的 能 力 。 测 试 工程 师 
既 要 与 用 户 谈 得 来 ,又 要 与 开发 人 员 说 得 上 话 。 和 用 户 交流 时 ,重点 须 放 在 系统 可 以 正确 地 
处 理 什么 和 不 可 以 处 理 什么 ,尽量 不 使 用 专业 术语 。 和 开发 方 交 流 时 ,要 尽量 使 用 专业 术 
语 , 对 相同 的 信息 ,软件 测试 人 员 须 重新 组 织 以 另 一 种 方式 表达 出 来 。 

软件 测试 人 员 要 善于 表达 自己 的 观点 ,一 方面 .要 坚定 地 表明 软件 缺陷 为 何必 须 修复 ， 
并 通过 实际 演示 力 陈 观点 ; 另 一 方面 ,要 采用 委婉 的 态度 和 适当 的 方式 ,使 得 开发 方 和 用 户 
愿意 接受 ,特别 是 尽量 避免 与 开发 人 员 可 能 的 冲突 。 

(2) 扎实 的 工作 作风 。 软 件 测试 人 员 在 工作 中 要 做 到 “五 心 ”"。 一 是 专心 : 要 集中 精 
力 , 不 可 一 心 二 用 。 精 力 集中 不 仅 能 够 提高 工作 效率 .还 能 发 现 更 多 的 软件 缺陷 。 二 是 细 
心 : 软件 测试 须 认 真 细致 执行 ,不 忽略 关键 细节 。 如 果 不 细 心 , 有 些 软件 缺陷 将 很 难 被 发 
现 。 三 是 耐心 : 很 多 时 候 软件 测试 会 显得 非常 枯燥 ,需要 很 大 的 耐心 才能 做 好 。 如 果 比 较 
浮躁 ,也 不 会 做 到 专心 和 细心 ,很 多 缺陷 将 从 眼前 逃 掉 。 四 是 责任 心 : 责任 心 是 做 好 任何 工 
作 的 必 备 素质 之 一 .软件 测试 尤其 如 此 。 软 件 测 试 往往 起 到 最 后 把 关 的 作用 ,如 果 数 衍 了 
事 , 软 件 缺 陷 就 会 被 放 进发 布 版 本 或 最 终 应 用 中 .很 可 能 造成 非常 严重 的 后 果 。 五 是 自信 
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心 : 自信 心 是 很 多 测试 人 员 缺 少 的 一 项 素质 ,过 到 困难 缩 手 缩 脚 ,工作 质量 大 打折 扣 。 但 只 
有 具备 了 较 强 的 自信 心 ,才能 更 好 地 与 用 户 和 开发 方 沟通 ,才能 更 好 地 开展 测试 工作 和 发 现 
软件 缺陷 。 软 件 测试 人 员 须 建立 能 解决 一 切 测试 问题 的 信心 。 

(3) 全 面 的 技术 基础 。 软 件 测试 人 员 需 要 具备 较为 全 面 的 技术 ,才能 高 质量 地 完成 测 
试 工作 ,才能 更 好 地 与 开发 方 进行 沟通 和 交流 。 除 了 设计 测试 用 例 、 编 写 测试 脚本 、 使 用 测 
试 工 具 、 建 立 测试 环境 等 测试 技术 外 ,技术 基础 通常 还 包括 编程 语言 .系统 架构 、 操 作 系统 、 
网 络 通信 数据库 的 特性 与 操作 等 ,还 需要 了 解 被 测 软件 系统 的 背景 知识 ,清楚 被 测 软件 用 
到 的 概念 和 技术 等 。 

(4) 高 级 的 综合 素质 。 要 成 为 一 名 优秀 的 软件 测试 人 员 , 还 应 具备 一 些 高 级 的 能 力 素 
质 , 包 括 逆 向 思维 能 力 、 良 好 记忆 力 、 勇 于 怀疑 和 探索 的 精神 、 追 求 完 美的 品质 等 。 比 如 逆向 
思维 能 力 , 开 发 人 员 通 常 从 正面 满足 需求 ,很 少 去 考虑 不 满足 需求 的 部 分 ;测试 人 员 就 要 逆 
向 思考 ,关注 哪些 开发 人 员 没 有 考虑 到 的 ,不 满足 需求 的 内 容 。 比 如 良好 的 记忆 力 ,许多 新 
出 现 的 软件 问题 与 之 前 曾经 发 现 过 的 相差 无 几 , 好 的 测试 者 应 有 能 力 把 以 前 遇 到 过 的 类 似 
错误 从 记忆 深 处 挖掘 出 来 并 举一反三 ,这 一 能 力 在 测试 过 程 中 具有 很 高 的 价值 。 比 如 勇于 
怀疑 和 探索 的 精神 ,开发 人 员 通 常会 尽量 将 所 有 的 问题 解释 过 去 ,软件 测试 人 员 需 要 听取 开 
发 人 员 的 说 明 , 但 必须 保持 高 度 警 惕 和 怀疑 精神 ,直到 自己 分 析 清楚 或 亲自 验证 之 后 才能 做 
出 决定 。 软 件 测试 人 员 不 要 害怕 进入 陌生 环境 ,要 勇于 探索 、 勇 于 挑战 ,想方设法 地 找 出 隐 
藏 在 深 处 的 错误 。 比 如 追求 完美 的 品质 ,在 测试 过 程 中 ,软件 测试 人 员 常 常会 碰 到 转瞬 即 逝 
或 者 难以 重 现 的 软件 故障 ,这 时 不 要 心 存 侥幸 ,而 是 要 尽 一 切 可 能 地 去 尝试 和 寻找 ,尽力 接 
近 目 标 , 力 求 完美 。 


1.9 术语 与 缩 略 语 


本 节 列 出 本 文 常用 的 术语 与 缩 略语 ,它们 的 定义 大 都 来 自 GB/T 11457《 信 息 技术 软 
件 工程 术语 ) 等 常用 的 标准 规范 。 未 列 出 的 术语 .请 参见 相关 标准 规范 。 

【软件 ”software】〗 与 计算 机 系统 的 操作 有 关 的 计算 机 程序 .规程 和 可 能 相关 的 文档 。 

【计算 机 程序 ”computer program】 计算 机 指令 和 数据 定义 的 组 合 , 它 允 许 计 算 机 硬 
件 执 行 计算 或 控制 功能 。 

【软件 工程 “software engineering】〗 应 用 计算 机 科学 理论 和 技术 以 及 工程 管理 原则 和 
方法 , 按 预算 和 进度 ,实现 满足 用 户 要 求 的 软件 产品 的 定义 、 开 发, 发布 和 维护 的 工程 或 进行 
研究 的 学 科 。 

【软件 配置 项 ”software configuration item】 为 配置 管理 设计 的 软件 的 集合 ,在 配置 
管理 过 程 中 ,作为 单个 实体 对 待 。 

【配置 管理 ”configuration management】 应 用 技术 的 和 管理 的 指导 和 监控 方法 以 标 
识 和 说 明 配 管 项 的 功能 和 物理 特征 .控制 这 些 特征 的 变更 ,记录 和 报告 变更 处 理 和 实现 状态 
并 验证 与 规定 的 需求 的 遵循 性 。 

【组 件 ”component】 一 个 可 被 独立 测试 的 最 小 软件 单元 。 

【系统 “system】 组 织 在 一 起 实现 一 个 特定 功能 或 一 组 功能 的 一 套 组 件 。 
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【测试 testing】 a) 在 规定 的 条 件 下 操作 系统 或 组 件 、 观 察 和 记录 结果 并 对 系 或 部 件 
的 某 些 方面 作 评价 的 过 程 ; b) 分 析 软 件 项 以 检测 在 存在 的 和 要 求 的 条 件 之 间 的 区 别 ( 隐 错 ) 
以 评价 软件 项 的 特征 。 

【测试 用 例 test case】〗 a) 为 具体 的 目标 而 开发 的 一 组 测试 输入 、 执 行 条 件 和 预料 的 
结果 ; b) 对 于 测试 项 ,规定 输入 、 预 料 的 结果 和 一 组 执行 条 件 的 文档 。 

【 白 盒 测试 white-box testing】 通过 分 析 系 统 或 组 件 的 内 部 结构 进行 的 测试 ,也 称 结 
构 测试 。 

【 黑 盒 测试 ”black-box testing】〗 忽略 系统 或 组 件 的 内 部 机 制 只 集中 于 响应 所 选择 的 
输入 和 执行 条 件 产生 的 输出 的 一 种 测试 ,也 成 功能 测试 。 
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软件 测试 技术 可 分 为 静态 测试 技术 和 动态 测试 技术 。 静 态 测 试 是 与 动态 测试 相对 而 言 
的 ,静态 测试 的 最 大 特点 ,就 是 不 需要 执行 被 测 软 件 ,而 动态 测试 需要 执行 一 次 或 多 次 被 测 
软件 。 静 态 测试 与 动态 测试 是 互补 的 ,通常 组 织 更 注重 动态 测试 而 不 太 重 视 静 态 测试 ,但 静 
态 测试 往往 能 够 以 相对 较 低 的 代价 发 现 被 测 软件 存在 的 缺陷 ,包括 需求 文档 或 者 其 他 相关 
文档 的 错误 和 二 义 性 。 特 别 是 当 动 态 测 试 成 本 较 高 时 ,尤其 适用 采用 静态 测试 技术 。 

执行 静态 测试 .需要 软件 需求 规格 说 明 、 源 程序 代码 以 及 其 他 诸如 设计 说 明 、 用 户 手册 
等 的 相关 文档 ,通常 还 需要 使 用 一 个 或 多 个 静态 测试 工具 。 如 图 2-1 所 示 。 

静态 测试 技术 主要 包括 : 文档 审查 .代码 审查 .静态 分 析 .代码 走 查 等 。 
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图 2-1 静态 测试 的 要 素 


2.1 文档 审查 


文档 审查 是 对 软件 文档 进行 静态 审查 的 一 项 技术 ,审查 对 象 一 般 包 括 软 件 需求 规格 说 
明 、 软 件 概要 设计 说 明 、 软 件 详 细 设计 说 明 、 软 件 用 户 手册 等 各 阶段 文档 ,审查 重点 是 文档 的 
完整 性 ,一 致 性 和 准确 性 。 

文档 审查 应 在 审查 前 明确 所 使 用 的 检查 单 。 为 适应 不 同类 型 文档 的 审查 ,需要 使 用 不 
同 的 检查 单 ,检查 单 的 设计 或 采用 应 经 过 评审 并 得 到 委托 方 的 确认 。 
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2.1.1 实施 要 点 


文档 审查 的 实施 要 点 主要 有 : 

(1) 确定 需要 进行 文档 审查 的 对 象 , 一 般 仅 审查 技术 文档 ,包括 软件 需求 规格 说 明 、 软 
件 设 计 文档 、 软 件 用 户 手 册 等 ; 

(2) 根据 通用 标准 规范 或 委托 方 要 求 的 工程 规范 对 每 份 需要 审查 的 文档 制定 文档 审查 
单 ,并 在 测试 策划 评审 时 提交 评审 专家 讨论 通过 ,并 得 到 委托 方 的 确认 ， 

(3) 按照 文档 审查 单 进行 文档 审查 ,记录 审查 结果 ,报告 发 现 的 问题 ,需要 时 还 应 对 更 
动 后 的 文档 进行 回归 审查 ,最 后 形成 文档 审查 报告 ; 

(4) 文档 审查 应 关注 : 文档 格式 是 否 符合 规范 要 求 ,文档 的 描述 是 否 明 确 、 清 晰 ,文档 
是 否 存在 错误 ,文档 之 间 是 否 一 致 等 方面 。 


2.1.2 组 织 与 流程 


文档 审查 一 般 采 用 桌面 检查 、 审 查 或 正式 评审 的 方式 进行 。 

桌面 检查 是 一 种 较 早 的 人 工 检查 方法 ,不 需要 召开 会 议 , 可 看 作 是 由 单 人 进行 的 文档 检 
查 ,成 本 较 小 ,效率 一 般 也 较 低 。 

审查 是 最 重要 的 人 工 静 态 测试 技术 之 一 ,通过 把 工作 产品 与 事先 定义 的 一 组 审查 规则 
进行 比较 ,在 不 运行 程序 的 情况 下 进行 测试 ,检测 和 发 现 软件 工作 产品 中 的 问题 和 遗漏 。 审 
查 是 一 个 正式 的 技术 活动 ,一般 由 软件 产品 开发 人 员 和 一 个 同行 小 组 来 执行 ,审查 小 组 一 般 
有 4 一 6 个 成 员 ,包括 1 个 协调 人 或 负责 人 、1 个 记录 人 、1 个 开发 者 代表 (提供 审查 材料 , 实 
施 问题 的 验证 和 确认 )、1 个 或 多 个 同行 专家 。 审 查 的 基本 步骤 包括 规划 .准备 .审查 .返工 
和 追查 ,如 图 2-2 所 示 。 在 审查 过 程 中 需要 执行 的 活动 包括 : 


审查 





图 2-2 审查 的 基本 步骤 


(1) 为 审查 小 组 成 员 提 供 准确 的 系统 概述 ; 

(2) 事先 把 相关 文档 或 产品 分 发 给 审查 小 组 成 员 ; 

(3) 在 审查 过 程 中 发 现 错误 并 进行 准确 记录 ; 

(4) 在 审查 过 程 中 提问 并 对 问题 进行 追踪 直到 发 现 错 误 ; 
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(5) 对 发 现 的 错误 进行 验证 和 确认 ,以 便于 错误 修复 ; 

(6) 根据 结果 决定 是 否 需要 再 次 审查 。 

正式 评审 被 用 于 在 开发 进入 下 一 阶段 之 前 发 现 中 间 产 品 中 存在 的 缺陷 ,通常 在 软件 开 
发 生存 周期 中 每 个 阶段 结束 时 实施 .也 可 以 在 阶段 中 间 出 现 严重 问题 的 时 候 实施 。 正 式 技 
术 评 审 始 于 1976 年 出 现 的 Fagan 代码 审查 技术 ,在 IBM 成 功 使 用 后 被 推广 并 演化 开 来 。 
评审 的 目标 是 找 出 设计 漏洞 .缺陷 或 成 本 过 高 的 部 分 ,一 般 通 过 提交 的 相关 文档 或 产品 来 尽 
早 识别 问题 所 在 ,并 在 评审 前 或 评审 时 对 问题 逐一 进行 澄清 。 正 式 评 审 为 在 下 个 阶段 开始 
前 对 项 目 进行 有 关 变 更 提供 了 一 次 机 会 。 关 于 评审 的 一 般 原 则 是 : 

(1) 评审 的 对 象 是 产品 ,并 不 针对 开发 人 员 ; 

(2) 评审 要 有 针对 性 ,不 能 漫 无 日 的 地 进行 ; 

(3) 要 求 事先 充分 准备 ,如 果 评 审 人 没有 准备 好 ,应 取消 会 议 或 重新 安排 时 间 ; 

(4) 为 每 个 被 评审 的 文档 或 产品 开发 一 个 检查 表 ; 

(5) 在 评审 时 ,只 进行 有 限 的 争辩 ; 

(6) 阐明 问题 所 在 ,但 不 要 试图 在 会 议 中 解决 问题 ; 

(7) 翔实 记录 问题 , 列 出 问题 .建议 和 解决 该 问题 的 负责 人 ,并 保留 问题 记录 ， 

(8) 将 会 议 过 程 , 发 现 的 缺陷 、 向 管理 者 提出 的 建议 等 进行 文档 化 。 





2.1.3 成 果 形 式 


文档 审查 的 成 果 一 般 包 括 文档 审查 实施 前 的 文档 检查 表 和 实施 后 的 文档 审查 报告 。 

文档 检查 表 根 据 通用 标准 规范 或 委托 方 要 求 的 工程 规范 制定 , 需 对 每 个 要 审查 的 文档 
制定 一 个 。 常 见 的 软件 需求 规格 说 明 .软件 概要 设计 说 明 、 软 件 详 细 设 计 说 明 、 软 件 用 户 手 
册 和 软件 系统 设计 说 明 的 文档 审查 表 , 如 表 2-1 一 表 2-5 所 示 。 





文档 审查 报告 的 内 容 一 般 包括 审查 对 象 概述 ,审查 时 间 、 审 查 人 员 审查 地 点 、 审 查 过 程 
以 及 审查 问题 等 。 
表 2-1 软件 需求 规格 说 明文 档 审查 表 
序号 软件 需求 规格 说 明文 档 审查 项 
i 0 者 ) 和 日 





六 确切 给 出 了 所 有 在 本 文档 中 出 现 的 专用 术语 和 缩 略 语 定义 

以 CSCI 为 单位 ,进行 软件 需求 分 析 

4 采用 了 适合 的 软件 需求 分 析 方 法 

5 总 体 概述 了 每 个 CSCI 应 满足 的 功能 需求 和 接口 关系 

完整 清晰、 详细 地 描述 由 待 开 发 软件 实现 的 全 部 外 部 接口 (包括 接口 的 名 称 、 标 识 、 特 性 、 通 信 
协议 .传递 的 信息 、 流 量 、 时 序 等 ) 

完整 清晰、 详细 地 描述 由 待 开发 软件 实现 的 功能 ,包括 业务 规则 、 处 理 流程 、 数 学 模型 .容错 处 
理 要 求 .异常 处 理 要 求 等 专业 应 用 领域 的 全 部 要 求 
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洲 
洪 


软件 需求 规格 说 明文 档 审查 项 





分 别 描述 各 个 CSCI 的 性 能 需求 





明确 提出 软件 的 安全 性 .可 靠 性 、. 易 用 性 .可 移植 性 .维护 性 需求 等 其 他 要 求 








用 名 称 和 项 目 唯一 标识 号 标识 每 个 内 部 接口 ,描述 在 该 接口 上 将 要 传递 的 信息 的 摘要 














用 名 称 和 项 目 唯一 标识 号 标识 CSCI 的 数据 元 素 , 说 明 数 据 元 素 的 测量 单位 .极限 值 / 值 域 . 精 
度 , 分 辨 率 、 来 源 /目的 (对 外 部 接口 的 数据 元 素 , 可 引用 详细 描述 该 接口 的 接口 需求 规格 说 明 
或 相关 文档 





指明 各 个 CSCI 的 设计 约束 





详细 说 明 在 将 开发 完成 了 的 CSCI 安装 到 目标 系统 上 时 ,为 使 其 适应 现场 独特 的 条 件 和 (或 ) 系 
统 环境 的 改变 而 提出 的 各 种 


描述 运行 环境 要 求 , 包 括 运行 软件 所 需要 的 设备 能 力 、 软 件 运 行 所 需要 的 支持 软件 环境 


详细 说 明 用 于 审查 CSCI 满足 需求 的 方法 ,标识 和 描述 专门 用 于 合格 性 审查 的 工具 、 技 术 、 过 
程 , 设 施 和 验收 限制 等 











详细 说 明 要 交付 的 CSCI 介质 的 类 型 和 特性 
描述 CSCI 维护 保障 需求 


描述 本 文档 中 的 工程 需求 与 软件 系 
的 双向 追踪 关系 


复 计 说 明 " 和 (或 )* 软 件 研制 任务 书 " 中 的 CSCI 的 需求 








文档 编制 规范 、 内 容 完整 .描述 准确 一 致 


表 2-2 软件 概要 设计 说 明文 档 审查 表 
软件 概要 设计 说 明文 档 审查 项 





概述 了 CSCI 在 系统 中 的 作用 ,描述 了 CSCI 和 系统 中 其 他 的 配置 项 的 相互 关系 
以 CSC 为 实体 进行 了 软件 体系 结构 的 设计 
软件 体系 结构 合理 、 优 化 、 稳 健 


应 对 CSC 之 间 的 接口 进行 设计 ,用 名 称 和 项 目 唯一 标识 号 标识 每 一 个 接口 ,并 对 与 接口 相关 
的 数据 元 素 ,消息 ,优先 级 、 通 信 协 议 等 进行 描述 








为 每 个 接口 的 数据 元 素 建 立 数 据 元 素 表 , 说 明 数 据 元 素 的 名 称 和 唯一 标识 号 .简要 描述 、 来 源 / 
用 户 、. 测 量 单位 .极限 值 / 值 域 (若是 常数 ,提供 实际 值 ) .精度 或 分 辩 率 、 计 算 或 更 新 的 频率 或 周 
期 .数据 元 素 执行 的 合法 性 检查 .数据 类 型 .数据 表示 /格式 .数据 元 素 的 优先 级 等 








规定 每 一 个 接口 的 优先 级 和 通过 该 接口 传递 的 每 个 消息 的 相对 优先 次 序 





~ 


描述 接口 通信 协议 ,分 小 节 给 出 协议 的 名 称 和 通信 规格 细节 ,包括 消息 格式 、 错 误 控制 和 恢复 
过 程 . 同 步 、 流 控制 .数据 传输 率 、 周 期 还 是 非 周 期 传送 以 及 两 次 传输 之 间 的 最 小 时 间 间 隔 、 路 
由 /地 址 和 命名 约定 .发送 服务 .状态 /标识 /通知 单 和 其 他 报告 特征 以 及 安全 保密 等 











CSC 内 存 和 处 理 时 间 分 配合 理 ( 仅 适用 于 “嵌入 式 软 件 " 或 “固件 ”) 





描述 CSCI 中 各 CSC 的 设计 ,将 软件 需求 规格 说 明 中 定义 的 功能 .性 能 等 全 部 都 分 配 到 具体 的 
软件 部 件 , 必 要 时 ,还 应 说 明 安 全 性 分 析 和 设计 并 标识 关键 模块 的 等 级 
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用 名 称 和 项 目 唯一 标识 号 标识 CSCI 中 的 全 局 数据 结构 和 数据 元 素 , 建 立 数据 元 素 表 
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序号 软件 概要 设计 说 明文 档 审查 项 
11 “| 用 名 称 和 项 目 唯一 标识 号 标识 被 多 个 CSC 或 CSU 共享 的 CSCI 数据 文件 ,描述 数据 文件 的 用 
途 、 文 件 的 结构 文件 的 访问 方法 等 
12 建立 软件 设计 与 软件 需求 的 追踪 表 
13 文档 编写 规范 ,内容 完整 .描述 准确 一 致 
表 2-3 软件 详细 设计 说 明文 档 审查 表 
序号 软件 详细 设计 说 明文 档 审查 项 
1 概述 了 CSCI 在 系统 中 的 作用 ,描述 了 CSCI 和 系统 中 其 他 的 配置 项 的 相互 关系 
国 以 包 或 类 的 方式 在 软件 体系 结构 范围 内 进行 了 逻辑 层次 分 解 , 将 软件 需求 规格 说 明 中 定义 的 
> 功能 、 性 能 等 全 部 进行 了 分 配 , 分 解 的 粒度 合理 ,相关 说 明 清 晰 
3 ed 与 用 况 需求 之 间 有 紧密 的 
汉 这 了 系统 的 动态 特征 ,对 进程 /重要 线程 的 功能 .生命 周期 和 进程 间 的 同步 与 协作 有 明确 的 
5 i 构 合理 .优化 ,稳健 
6 寺 每 的 接口 都 设计 有 相应 的 接口 类 / 包 , 规 定 每 一 个 接口 的 优先 级 和 通过 该 接口 传递 的 
每 个 消息 的 相对 优先 次 序 
描述 接口 和 数据 元 素 的 来 源 / 用 户 、 测 量 单位 .极限 值 / 值 域 (若是 常数 , 提 
7 辩 率 .计算 或 更 新 的 频率 或 周期 .数据 元 素 执行 的 合法 性 检查 .数据 类 型 .数据 表 
元 素 的 优先 级 等 
8 进行 安全 性 分 析 和 设计 并 : 键 模块 的 等 级 
9 为 完成 需求 的 功能 增加 必要 的 包 / 类 ,使 得 层次 分 解 的 结果 是 一 个 完整 的 设计 
10 实现 视图 描述 CSCI 的 实现 组 成 ,每 个 构件 分 配 了 合适 的 需求 功能 ,构件 的 表现 形式 (exe、dll 
或 ocx 等 ) 合 理 
11 部 署 视图 描述 CSCI 的 安装 运行 情况 ,能够 对 未 来 的 运行 景象 形成 明确 概念 
12 建立 软件 设计 与 软件 需求 的 追踪 表 
13 采用 的 UML 图 形 或 其 他 图 形 描述 正确 . 详 略 适当 ,有 必要 的 文字 说 明 
14 文档 编写 规范 .内 容 完整 .描述 准确 一 臻 
表 2-4 软件 用 户 手册 文档 审查 表 
序号 软件 用 户 手 册 文 档 审查 项 
1 正确 给 出 所 有 在 本 文档 中 出 现 的 专用 术语 和 缩 略语 的 确切 定义 
2 准确 描述 软件 安装 过 程 ,完整 列 出 安装 的 有 关 媒 体 情 况 及 使 用 方法 
3 准确 描述 软件 的 各 功能 及 操作 说 明 ,包括 初始 化 .用 户 输 入 .输出 .终止 等 信息 
证 准确 标识 软件 的 所 有 出 错 告 警 信息 ,每 个 出 错 告警 信息 的 含义 和 出 现 该 错误 告警 信息 时 应 采 
取 的 恢复 动作 等 
5 文档 编写 规范 、 内 容 完 整 .描述 准确 一 臻 
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表 2-5 软件 系统 设计 说 明文 档 审查 表 
序号 软件 系统 设计 说 明文 档 审查 项 





1 总 体 概述 了 系统 (或 项 目 ) 的 建设 背景 或 改造 背景 ,概述 了 系统 的 主要 用 途 
2 引用 文件 完整 准确 ,包括 引用 文档 (文件 ) 的 文档 号 ,标题 .编写 单位 (或 作者 ) 和 日 期 等 
3 确切 地 给 出 所 有 在 本 文档 中 出 现 的 专用 术语 和 缩 略 语 的 定义 











4 完整 清晰 描述 软件 系统 的 功能 需求 
5 完整 清晰 描述 软件 系统 的 性 能 需求 
6 完整 清晰 描述 软件 系统 的 外 部 接口 需求 











7 完整 清晰 描述 软件 系统 的 适应 性 需求 
8 完整 清晰 描述 软件 系统 的 安全 性 需 
9 完整 清晰 描述 软件 系统 的 操 

10 完整 清晰 描述 软件 系统 需求 

11 清晰 描述 软件 系统 的 运行 环境 

12 描述 了 系统 的 生产 和 部 署 阶段 所 需要 的 支持 环境 

13 以 配置 项 为 单位 (包括 软件 配置 项 和 (或 硬件 配置 项 ?设计 了 软件 系统 体系 结构 或 系统 体系 结构 

14 软件 系统 的 体系 结构 合理 、 可 行 

15 用 名 称 和 项 目 唯 一 标 -SC 





















号 标 











2.2 代码 审查 


代码 审查 是 对 软件 代码 进行 静态 审查 的 一 项 技术 ,目的 是 检查 代码 和 设计 的 一 致 性 、 代 
码 执行 标准 的 情况 、 代 码 迪 辑 表 达 的 正确 性 、 代 码 结构 的 合理 性 以 及 代码 的 规范 性 、 可 读 性 。 
代码 审查 应 根据 所 使 用 的 语言 和 编码 规范 确定 审查 所 用 的 检查 单 , 检 查 单 的 设计 或 采用 经 
过 评审 并 得 到 委托 方 的 确认 。 


2.2.1 实施 要 点 


代码 审查 的 实施 要 点 主要 有 以 下 6 点 。 
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| 
(1) 对 于 代码 执行 标准 的 情况 .代码 逻辑 表达 的 正确 性 、 代 码 结构 的 合理 性 以 及 代码 的 
可 读 性 等 ,应 明确 规则 检查 标准 ,一 般 采 用 开发 过 程 中 遵循 的 标准 ,也 可 由 测试 方 制定 规则 
检查 标准 ,规则 检查 标准 需 提交 测试 策划 评审 通过 ,得 到 委托 方 的 确认 。 
(2) 尽 可 能 选用 相应 代码 的 规则 检查 工具 进行 测试 ,对 工具 设置 的 检查 规则 应 符合 评 
审 通过 的 规则 。 对 于 工具 的 检查 结果 ,特别 是 问题 部 分 ,需要 人 工 确认 。 
(3) 检查 代码 和 设计 的 一 致 性 需要 阅读 设计 文档 和 代码 ,以 检查 代码 实现 是 否 与 设计 
= 致 。 
(4) 报告 发 现 的 问题 ,形成 代码 审查 报告 。 
(5) 由 于 软件 代码 的 复杂 性 ,代码 审查 的 通过 标准 不 宜 设 为 100% 满 足 ; 测 试 方 可 用 百 
分 比 的 方式 提出 建议 通过 标准 ,最 终 由 委托 方 确定 。 
(6) 有 条 件 时 ,在 回归 测试 前 ,可 对 软件 更 改 前 后 版 本 的 代码 进行 比 对 。 


2.2.2 组 织 与 流程 


代码 审查 采用 自动 化 测试 工具 与 人 工 确认 相 结合 的 方式 进行 ,具体 流程 如 下 。 

(1) 制定 代码 审查 单 。 代 码 审查 单 应 根据 所 使 用 的 语言 和 编码 规范 制定 ,重点 对 代 
码 执行 标准 的 情况 .代码 好 辑 表达 的 正确 性 、 代 码 结构 的 合理 性 以 及 代码 的 可 读 性 等 进 
行 检查 ,并 需 提交 测试 策划 评审 通过 ,得 到 委托 方 的 确认 。 通 常 可 采取 在 公认 度 高 的 通 
用 检查 单 (比如 MISRA C++ : 2008) 的 基础 上 根据 具体 情况 剪裁 的 方式 ,制定 所 需要 的 
代码 审查 单 。 

(2) 根据 代码 审查 单 . 设 定 自动 化 测试 工具 的 规则 集 , 进 行 自动 化 代码 规则 检查 。 对 于 
C/C++ 语言, 经常 使 用 的 自动 化 测试 工具 包括 TestBed、CodeCast 等 。 自 动 化 测试 工具 运 
行 后 ,将 生成 自动 化 检查 的 结果 .一 般 地 .自动 化 检查 结果 中 将 包含 大 量 的 提示 、 警 告 和 错误 
信息 ,其 中 可 能 含有 相当 大 比重 的 虚 警 或 误 报信 息 。 

(3) 采用 人 工 方式 对 工具 检查 结果 进行 分 析 和 确认 。 需 对 工具 检查 结果 进行 逐条 分 
析 ,确认 其 指出 的 相应 代码 是 否 存在 问题 。 必 要 时 ,可 请 软件 开发 人 员 对 代码 进行 解释 , 协 
助 确 定 问题 。 如 果 确 实 存在 问题 ,应 填写 问题 报告 单 。 

(4) 采用 人 工 方式 ,检查 代码 和 设计 的 一 致 性 。 这 需要 阅读 设计 文档 和 代码 ,比较 代码 
实现 是 否 与 设计 一 致 ,目前 只 能 通过 人 工 方式 进行 。 同 样 地 ,如 果 存 在 问题 ,应 填写 问题 报 
告 单 。 在 采用 人 工 方式 对 工具 检查 结果 进行 确认 以 及 检查 代码 和 设计 的 一 致 性 时 ,可 以 采 
用 会 议 方式 进行 ,应 详细 记录 分 析 结 果 .特别 是 审查 中 发 现 的 问题 。 应 对 问题 的 修改 情况 进 
行 跟踪 ,必要 时 组 织 再 次 代码 审查 。 


2.2.3 成 果 形 式 
代码 审查 的 成 果 一 般 包括 代 码 审查 实施 前 的 代码 审查 单 和 实施 后 的 代码 审查 报告 。 


代码 审查 单 应 根据 所 使 用 的 语言 和 编码 规范 制定 ,可 采取 在 公认 度 高 的 通用 检查 单 的 
基础 上 根据 具体 情况 剪裁 的 方式 进行 。 代 码 审查 单 示例 如 表 2-6 所 示 。 
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代码 审查 报告 的 内 容 一 般 包 括 审 查 对 象 概述 .审查 时 间 、 审 查 人 员 、 审 查 地 点 、 审 查 过 
程 、 代 码 审 查分 析 与 统计 结果 (软件 单元 的 规模 、 圈 复杂 度 、 扇 入 扇 出 数 、 源 代码 注释 率 、 参 数 
化 率 等 静态 特性 ) 以 及 审查 问题 等 。 
表 2-6 代码 审查 单 示例 















































































































序号 类 别 检 查 项 
1 只 读 存储 器 空白 单元 的 处 理 是 否 合理 
2 随机 存储 器 空白 单元 的 处 理 是 否 合理 
3 1/O 地 址 定义 是 否 正确 
4 | 初始 化 和 定义 | 实际 地 址 范围 是 多 少 ? 可 寻 址 范围 是 多 少 ? 对 实际 地 址 范围 以 外 的 寻 址 是 
否 进行 了 正确 的 处 理 
5 变量 是 否 唯一 定义 
6 
| 是 否 引 用 了 未 经 初始 化 的 变量 
8 模块 中 间 的 数据 关系 是 否 符合 约定 
9 数学 模型 的 程序 实现 是 否 正确 
io | 
11 对 非法 数据 有 无 防范 措施 (如 除法 中 除数 为 0 等 情况 ) 
12 数据 处 理 中 是 否 存在 囚 计 误差 
一 二 | 六 年 
14 数据 类 型 是 否 满足 精度 要 求 
15 数组 是 否 越界 
16 是 否 存在 比较 两 个 浮 点 数 相等 的 运算 
17 每 个 循环 是 否 止 的 情况 
| 循环 体 是 否 存 在 循环 次 数 不 正 确 的 可 能 ,如 是 否 存在 迁 代 次 数 多 1 或 少 1 
的 情况 
3 是 否 存在 非 穷 举 判断 ,如 输入 参数 的 期 望 值 为 "1"“2" 或 "3", 那 么 逻辑 上 是 
否 可 以 判定 该 值 非 *1”、 非 *2" 就 必定 是 “3”, 这 种 假设 是 否 正确 
20 中 断 谋 套 及 现场 保护 是 否 正确 
21 | 控制 流 条 件 跳 转 语句 中 的 条 件 判 断 是 否 正确 
22 程序 是 否 转 错 地 方 
23 控制 逻辑 是 否 完整 
24 是 否 使 用 了 abort,exit 等 跳 转 函数 
25 函数 中 是 否 存在 多 个 出 口 
26 循环 中 是 否 存在 多 个 出 口 
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续 表 
序号 类 别 检 查 项 
二 用 于 增加 程序 的 可 测试 性 而 引入 的 必要 功能 和 特征 是 否 经 过 验证 ,证 明 不 
会 因此 影响 软件 的 可 靠 性 和 安全 性 
28 | 多 余 物 是 否 存在 不 可 能 执行 到 的 模块 .分 支 .语句 
29 是 否 存 在 定义 而 未 使 用 的 变量 及 标号 
数据 及 标志 有 无 防止 瞬时 干扰 的 措施 ,一 般 应 采用 "三 比 二 " 比 对 策略 .定时 
刷新 存储 单元 或 回 送 比 对 后 周期 数据 等 措施 
31 重要 数据 的 无 用 数据 位 是 否 采用 了 屏蔽 措施 
32 “| 安全 可 靠 性 设计 | 对 程序 误 跳 转 或 跑 飞 是 否 采取 了 防范 措施 ,如 陷阱 处 理 或 路 径 判断 
区 免 采 用 仅 使 用 一 位 的 逻辑 "1” 和 “0” 表 示 ,一 般 使 
的 特定 模式 表示 
34 有 无 必要 的 容错 措施 
35 对 误 操作 是 否 有 防范 措施 
本 健壮 性 设计 对 于 软件 的 重要 功能 系统 安全 性 的 功能 ,一 旦 硬件 发 生 故 障 时 ,软件 
:程序 上 维持 其 功能 
3 是 否 正确 有 意义 
38 格式 A 说 明 、 出 口 说 
39 程序 模块 的 注 
40 缓冲 区 的 使 用 是 
41 数据 处 理 流 程 是 否 高 效 、 合 
42 “| 数据 处 理 数据 处 理 逻 辑 是 否 正 
43 数据 处 理 是 否 通 俗 易 懂 
44 数据 处 理 方法 是 否 简 洁 .高效 .合理 
45 模块 的 规模 , 即 代码 行 数 是 否 符 合 要 
46 模块 的 圈 复 杂 度 是 否 符 合 要 求 
47 模块 的 扇 人 、 扇 出 数 是 否 符 合 要 求 
48 模块 的 参数 化 率 是 否 符合 要 求 
49 | 其 他 堆栈 的 处 理 是 否 合理 ,是 否 存在 错误 
50 若 使 用 了 看 门 狗 技 术 , 其 时 间 周 期 是 否 合理 
51 每 个 模块 是 否 完成 一 个 主要 功能 
52 模块 的 入口 .出 口 是 否 进行 了 现场 保护 
53 全 局 变量 的 不 恰当 使 用 
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2.3 静态 分 析 


静态 分 析 是 一 种 对 代码 的 机 械 性 的 和 程序 化 的 特性 分 析 方 法 ,主要 目的 是 以 图 形 的 方 
式 表现 程序 的 内 部 结构 ' 供 测试 人 员 对 程序 结构 进行 分 析 。 静 态 分 析 的 内 容 包括 控制 流 分 
析 、 数 据 流 分 析 、 接 口 分 析 、 表 达 式 分 析 等 ,可 根据 需要 进行 裁剪 ,但 一 般 至 少 应 进行 控制 流 
分 析 和 数据 流 分 析 。 


2.3.1 实施 要 点 


在 静态 分 析 中 ,测试 人 员 通 过 使 用 静态 分 析 测 试 工具 分 析 程 序 源 代 码 的 系统 结构 .数据 
结构 .内 部 控制 巡 辑 等 内 部 结构 ,生成 函数 调用 关系 图 .控制 流 图 .内 部 文件 调用 关系 图 . 子 
程序 表 、 宏 和 函数 参数 表 等 各 种 图 形 图 表 , 可 以 清晰 地 展现 被 测 软件 的 结构 组 成 ,并 通过 对 
这 些 图 形 图 表 的 分 析 , 帮 助 测试 人 员 阅 读 和 理解 程序 ,检查 软件 是 否 存 在 缺陷 或 错误 。 


1. 控制 流 分 析 

20 世纪 70 年 代 以 来 .结构 化 程序 的 概念 逐渐 被 人 们 接受 ,程序 流程 图 (flowchart, 又 称 
框图 ) 是 人 们 最 熟悉 的 一 种 程序 控制 结构 的 图 形 表示 。 程 序 流程 图 的 框 内 常常 标明 处 理 要 
求 和 条 件 ,而 这 些 要 求 和 条 件 在 做 路 径 分 析 时 是 不 重要 的 。 为 了 更 加 突出 控制 流 的 结构 ,人 
们 对 程序 流程 图 进行 了 简化 , 称 为 控制 流 图 (control-flowgraph) 或 程序 图 。 程 序 图 是 有 向 
图 ,是 路 径 测试 的 基本 依据 。 程 序 图 中 基本 的 控制 结构 对 应 的 图 形 符号 如 图 2-3 所 示 。 


so 25 ho 


图 2-3 程序 图 的 图 形 符号 


控制 流 分 析 中 常用 的 有 函数 调用 关系 图 和 函数 控制 流 图 。 函 数 调用 关系 图 通过 树 形 方 
式 展 现 软 件 各 函数 的 调用 关系 .描述 多 个 函数 之 间 的 关系 ,是 从 外 部 视角 查看 各 函数 ;函数 
控制 流 图 是 由 节点 和 边 组 成 的 有 向 图 ,节点 表示 一 条 或 多 条 语句 , 边 表示 节点 之 间 的 控制 走 
向 , 即 语句 的 执行 ,是 从 函数 内 部 考察 控制 关系 .直观 地 反映 函数 的 内 部 逻辑 结构 。 

函数 调用 关系 图 的 测试 重点 主要 有 : 
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(1) 函数 之 间 的 调用 关系 是 否 符合 要 求 ; 

(2) 是 否 存在 递归 调用 ,递归 调用 一 般 对 内 存 的 消耗 较 大 ,对 于 不 是 必须 的 递归 调用 应 
尽量 改 为 循环 结构 ; 

(3) 函数 调用 层次 是 否 太 深 , 过 深 的 函数 调用 容易 导致 数据 和 信息 传递 的 错误 和 遗漏 ， 
可 通过 适当 增加 单个 函数 的 复杂 度 来 改进 ; 

(4) 是 否 存在 孤立 的 函数 ,孤立 函数 意味 着 永远 执行 不 到 的 场景 或 路 径 , 为 多 余 项 。 

函数 控制 流 图 的 测试 重点 主要 有 : 

(1) 是 否 存在 多 出 口 情况 ,多 个 程序 出 口 意味 着 程序 不 是 从 一 个 统一 的 出 口 退 出 该 变 
量 空间 ,如 果 涉 及 指针 赋值 .空间 分 配 等 情况 ,一般 容易 导致 空 指针 、 内 存 未 释放 等 缺陷 ; 同 
时 ,每 增加 一 个 程序 出 口 将 使 代码 的 圈 复 杂 度 增加 1 ,容易 造成 高 圈 复 杂 度 的 问题 ; 

(2) 是 否 存在 孤立 的 语句 ,孤立 的 语句 意味 着 永远 执行 不 到 的 路 径 , 是 明显 的 编程 
缺陷 ; 

(3) 圈 复 杂 度 是 否 太 大 ,一 般 地 , 圈 复 杂 度 不 应 大 于 10, 过 高 的 圈 复 杂 度 将 导致 路 径 的 
大 幅 增加 ,容易 引入 缺陷 ,并 带 来 测试 难度 和 工作 量 的 增加 ; 

(4) 释放 存在 非 结 构 化 的 设计 , 非 结 构 化 的 设计 经 常 导致 程序 的 非 正 常 执行 结构 ,程序 
的 可 读 性 差 ,容易 造成 程序 缺陷 且 在 测试 中 不 易 被 发 现 。 


2. 数据 流 分 析 

数据 流 分 析 最 初 是 随 着 编译 系统 有 效 目 标 码 的 生成 而 出 现 的 ,后 来 在 软件 测试 中 也 得 
到 成 功 应 用 ,用 于 查找 如 引用 未 定义 变量 等 程序 错误 或 对 未 使 用 变量 再 次 赋值 等 异常 情况 。 

如 果 程 序 中 某 一 语句 执行 时 能 改变 某 程序 变量 的 值 , 则 称 此 变量 是 被 该 语句 定义 的 ;如 
果 某 一 语句 的 执行 引用 了 内 存 中 某 程序 变量 的 值 , 则 说 该 语句 引用 此 变量 。 

数据 流 分 析 考 察 变 量 定义 和 变量 引用 之 间 的 路 径 ,测试 重点 通常 集中 在 定义 /引用 异常 
故障 分 析 上 ,主要 包括 : 

(1) 使 用 未 定义 的 变量 ,如 果 一 个 变量 在 初始 化 前 被 使 用 ,其 当前 值 是 未 知 的 ,可 能 会 
导致 危险 的 后 果 ; 

(2) 变量 已 定义 ,但 从 未 被 使 用 ,该 类 错误 通常 不 会 导致 软件 缺陷 ,但 应 对 代码 中 的 所 
有 这 种 类 型 的 问题 进行 检查 和 确认 ; 

(3) 变量 在 使 用 之 前 被 重复 定义 ,变量 在 两 次 赋值 之 间 未 被 使 用 ,这 种 情况 比较 常见 ， 
大 部 分 情况 下 也 不 会 导致 软件 缺陷 .但 也 应 该 进行 检查 和 确认 ; 

(4) 参数 不 匹配 , 指 的 是 函数 声明 中 的 形 参 的 变量 类 型 与 实 参 的 变量 类 型 不 同 , 许 多 编 
译 器 对 这 种 情况 执行 自动 类 型 转换 .但 在 某 些 情况 下 是 危险 的 ; 

(5) 可 疑 类 型 转换 , 指 的 是 为 一 个 变量 赋值 的 类 型 与 变量 本 身 的 类 型 不 一 致 ,类 型 转换 
时 两 种 类 型 看 起 来 可 能 很 相似 ,但 赋值 结果 可 能 会 导致 信息 丢失 ,如 果 无 法 避免 ,应 使 用 显 
式 的 强制 类 型 转换 。 





2.3.2 组 织 与 流程 


静态 分 析 主 要 通过 运行 静态 分 析 测 试 工具 对 程序 代码 进行 自动 化 分 析 的 方式 开展 ,并 
需 使 用 人 工 方式 对 测试 工具 生成 的 结果 进行 分 析 并 得 出 结论 。 如 果 存 在 问题 ,应 填写 问题 
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报告 单 。 
2.3.3 成 果 形 式 


静态 分 析 的 成 果 包 括 静 态 分 析 测 试 工具 的 原始 结果 ,以 及 人 工分 析 得 出 的 结论 。 可 以 
形成 单独 的 静态 分 析 报 告 ,或 者 合并 到 其 他 静态 测试 (比如 代码 审查 ) 的 报告 中 。 


2.4 代码 走 查 


代码 走 查 是 对 软件 代码 进行 静态 审查 的 一 项 技术 ,由 测试 人 员 组 成 小 组 ,准备 一 批 有 代 
表 性 的 测试 用 例 ,集体 扮 演 计 算 机 的 角色 , 沿 程序 的 逻辑 ,逐步 运行 测试 用 例 ,查找 被 测 软件 
缺陷 。 


2.4.1 实施 要 点 


代码 审查 的 实施 要 点 主要 有 : 

(1) 由 测试 人 员 集 体 阅 读 讨论 程序 ,一 般 采 用 由 开发 人 员 逐 行 讲解 代码 审查 组 集体 讨 
论 的 方式 进行 ; 

(2) 要 准备 一 批 有 代表 性 的 测试 用 例 , 要 有 确定 的 输入 数据 和 输出 结果 ,用 人 脑 代替 计 
算 机 执行 测试 用 例 .运行 程序 ,并 记录 测试 结果 。 


2.4.2 组 织 与 流程 


代码 审查 一 般 采 用 会 议 方式 进行 , 需 成 立 代 码 审查 小 组 ,代码 审查 小 组 一 般 有 5 一 8 个 
成 员 ,包括 1 名 协调 人 或 负责 人 、1 名 记录 人 、1 名 开发 者 代表 (提供 审查 材料 ,阅读 代码 , 实 
施 问题 的 验证 和 确认 )、1 名 或 多 名 同行 专家 。 审 查 的 基本 步骤 包括 规划 、 准 备 、 审 查 、 返 工 
和 追查 ,如 图 2-2 所 示 。 

在 代码 审查 之 前 ,开发 者 代表 向 审查 小 组 负责 人 提供 软件 详细 设计 说 明 程序 清单 、 编 
码 规范 及 相关 文档 等 审查 材料 .并 通过 审查 小 组 负责 人 把 审查 材料 分 发 给 小 组 成 员 ,作为 审 
查 依据 。 审 查 小 组 负责 人 还 应 给 每 个 成 员 分 发 已 经 过 确认 的 代码 审查 检查 单 ,也 称 缺陷 检 
查 表 , 列 出 以 往 编 程 中 的 常见 错误 ,并 对 错误 进行 了 分 类 。 

审查 小 组 成 员 在 仔细 阅读 上 述 材 料 后 ,召开 代码 审查 会 议 , 进 入 正式 的 审查 阶段 。 期 
间 , 开 发 者 代表 对 程序 逐 句 讲解 ,审查 组 其 他 成 员 听 取 讲 解 . 提 出 自己 的 疑问 ,进而 展开 讨 
论 ,以 确认 是 否 存在 错误 或 缺陷 。 

实践 表明 ,编程 人 员 在 讲解 自 编程 序 的 过 程 中 ,更 易于 发 现 原先 未 能 发 现 的 问题 ,同时 
审查 小 组 成 员 的 共同 讨论 ,也 有 利于 错误 的 暴露 .发 现 更 多 的 问题 。 
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2.4.3 成 果 形 式 


代码 走 查 的 成 果 包 括 代码 走 查 的 测试 用 例 以 及 代码 走 查 结果 。 可 以 形成 单独 的 代码 走 
查 报告 ,或 者 合并 到 其 他 静态 测试 (比如 代码 审查 ) 的 报告 中 。 


2.5 静态 测试 技术 分 析 


静态 测试 是 一 种 不 需要 实际 执行 软件 的 测试 方式 ,使 用 审查 、 走 查 、 评 审 等 方式 进行 。 
静态 测试 需要 使 用 软件 工具 来 保障 覆盖 性 和 自动 化 ,也 需要 进行 人 工 检查 确认 以 保障 测试 
效果 。 静 态 测 试 不 需要 执行 代码 ,可 以 在 软件 开发 过 程 的 任何 阶段 开展 ,寻找 软件 中 存在 的 
错误 和 缺陷 。 

实际 运行 程序 以 测试 软件 功能 和 性 能 的 测试 , 称 为 动态 测试 。 动 态 测试 与 静态 测试 在 
测试 效果 上 各 有 所 长 。 相 比 于 动态 测试 .静态 测试 的 优点 在 于 以 下 6 点 。 

(1) 静态 测试 能 够 更 早 地 发 现 软件 问题 。 静 态 测 试 不 需要 执行 代码 ,能 够 在 需求 分 析 、 
设计 阶段 甚至 更 早 地 开展 。 更 早 地 发 现 问题 ,往往 意味 着 能 够 节省 大 量 的 缺陷 修正 时 间 和 
金钱 。 

(2) 静态 测试 成 本 较 低 。 静 态 测试 采用 审查 、 走 查 .评审 等 方式 进行 ,通常 不 需要 设计 
和 执行 大 量 的 测试 用 例 .发现 缺陷 的 单位 成 本 往往 比 动态 测试 低 得 多 。 

(3) 静态 测试 更 加 快速 。 代 码 审查 、 静 态 分 析 采 用 自动 化 测试 工具 与 人 工 确认 相 结合 
的 方式 ,文档 审查 和 代码 走 查 在 执行 前 需要 有 较为 充分 的 准备 ,但 相对 于 动态 测试 ,通常 花 
费 较 短 的 时 间 。 

(4) 静态 测试 发 现 的 问题 更 容易 定位 。 静 态 测试 通 过 直接 查看 源 代码 或 模拟 执行 代码 
进行 测试 ,缺陷 原因 更 容易 分 析 . 软 件 问题 更 容易 定位 。 

(5) 静态 测试 能 获得 更 高 的 覆盖 率 。 由 于 只 能 在 实际 执行 的 代码 中 寻找 缺陷 ,动态 测 
试 的 语句 覆盖 率 通 常 只 能 达到 60% 至 70% .而 静态 测试 往往 能 够 在 较 短 时 间 内 达到 100% 
的 覆盖 。 

(6) 静态 测试 可 以 发 现 更 多 类 型 的 缺陷 。 静 态 测试 能 够 在 不 同 层 次 上 发 现 编程 缺陷 ， 
比如 变量 在 初始 化 前 使 用 ` 数 组 越界 .不 可 达 代码 、 循 环 中 的 无 条 件 分 支 . 参 数 类 型 或 数目 不 
匹配 未 被 调用 的 函数 、 空 指针 或 指针 类 型 错误 等 ,而 动态 测试 只 能 发 现 通过 程序 运行 暴露 
出 的 缺陷 。 

静态 测试 也 存在 不 少 缺 点 ,主要 有 以 下 4 点 。 

(1) 静态 测试 工具 经 常会 报告 出 大 量 的 异常 问题 ,使 得 判断 哪些 是 真正 的 问题 成 为 一 
项 繁琐 的 工作 。 

(2) 静态 测试 无 法 看 到 代码 之 外 需要 分 析 的 因素 ,比如 : 软件 需求 规格 说 明 、 操 作 系 
统 、 库 文件 等 。 

(3) 静态 分 析 器 对 识别 特定 类 型 的 代码 问题 还 存在 不 足 , 比 如 函数 指针 、 条 件 语句 中 的 
变量 等 。 
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(4) 静态 测试 通常 不 作为 一 种 详尽 测试 ,只 是 检查 代码 /算法 的 健全 程度 以 判断 程序 是 
否 为 详尽 测试 做 好 准备 。 

总 而 言 之 ,静态 测试 侧重 于 文档 及 源 代 码 的 检查 与 优化 ,基本 思想 是 不 实际 执行 软件 ， 
直接 查看 源 代码 或 模拟 执行 代码 ,目标 是 直接 定位 代码 中 的 缺陷 ,提出 结构 设计 优化 和 有 关 
测试 重点 的 意见 建议 。 


CHAPTER 3 
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与 静态 测试 不 同 ,动态 测试 需要 首先 设计 测试 用 例 , 然 后 一 次 或 多 次 运行 被 测 软件 ,并 
通过 分 析 软 件 运 行 结果 与 期 望 结 果 的 差异 .来 分 析 被 测 软件 是 否 满足 要 求 。 

前 面 已 经 介绍 ,软件 测试 有 多 种 分 类 方法 。 从 是 否 关注 被 测 程序 的 内 部 结构 和 实现 细 
节 的 角度 ,软件 测试 可 分 为 白 盒 测试 . 黑 盒 测试 ,以 及 灰 盒 测试 。 

白 盒 测 试 利用 程序 设计 的 内 部 巡 辑 和 控制 结构 生成 测试 用 例 ,进行 软件 测试 : 黑 盒 测试 方 
法 主要 通过 分 析 规 格 说 明 中 被 测 软件 输入 和 输出 的 有 关 描 述 来 设计 测试 用 例 , 不 需要 了 解 被 
测 软件 的 实现 细节 :; 灰 盒 测 试 是 介 于 白 盒 测 试 和 黑 盒 测试 之 间 的 一 种 测试 方法 ,基于 程序 运行 
时 的 外 部 表现 并 结合 程序 内 部 逻辑 结构 来 设计 测试 用 例 , 采 集 程序 外 部 输出 和 外 部 接口 数据 
以 及 路 径 执行 信息 来 衡量 测试 结果 ,对 软件 程序 的 外 部 需求 及 内 部 路 径 都 进行 检验 。 


3.1 白 念 测试 


3.1.1 概述 


白 盒 测试 (white-box testing) 也 称 结构 测试 .多 辑 驱 动 测试 或 基于 程序 的 测试 。 根 据 
GB/T 11457 一 2006 ,结构 测试 (structural testing) 是 “侧重 于 系统 或 部 件 内 部 机 制 的 测试 。 
类 型 包括 分 支 测试 .路 径 测试 .语句 测试 ”。 白 盒 测 试 将 测试 形象 地 比喻 成 把 程序 放 在 一 个 
透明 的 盒子 里 ,如 图 3-1 所 示 ,测试 人 员 了 解 被 测 程序 的 内 部 结构 ,利用 程序 的 内 部 逻辑 结 





输入 输出 


图 3-1 白 盒 测试 的 基本 原理 图 
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构 和 相关 信息 ,对 程序 的 结构 和 路 径 进行 测试 。 白 盒 测 试 是 从 程序 设计 者 的 角度 进行 的 
测试 。 

白 盒 测 试 的 方法 总 体 上 可 分 为 静态 方法 和 动态 方法 两 大 类 。 静 态 方法 是 不 实际 执行 程 
序 而 进行 的 测试 ,主要 是 检查 程序 代码 或 文档 的 表示 和 描述 是 否 一 臻 .符合 要 求 以 及 有 无 冲 
突 或 歧义 。 文 档 审查 .代码 审查 .静态 分 析 、 代 码 走 查 等 都 属于 静态 测试 方法 ,已 在 第 2 章 中 
进行 了 介绍 。 

动态 测试 的 主要 特点 是 当 软 件 在 真实 的 或 模拟 的 环境 中 执行 之 前 、 之 后 及 执行 当中 ,对 
软件 行为 进行 分 析 。 动 态 测 试 时 ,软件 在 受 控 的 环境 下 使 用 特定 的 期 望 结果 进行 正式 运行 ， 
显示 其 在 检查 状态 下 是 正确 还 是 不 正确 。 在 本 节 后 续 小 节 中 ,将 主要 介绍 动态 白 盒 测试 技 
术 , 包 括 基 本 路 径 测试 .控制 结构 测试 和 其 他 的 技术 。 

基本 路 径 测试 对 程序 设计 复杂 度 进行 合理 度量 ,并 以 此 为 指导 来 定义 一 个 基本 路 径 集 
合 。 基 本 路 径 测 试 对 所 有 独立 路 径 进 行 测试 .这些 独立 路 径 能 组 成 程序 的 任意 一 条 路 径 , 因 
此 能 够 满足 分 支 测试 的 要 求 。 基 本 路 径 测 试 通过 对 基本 路 径 集 生成 测试 用 例 , 保 证 程序 中 
的 每 条 语句 在 测试 中 至 少 被 执行 一 次 。 

控制 结构 测试 是 由 基本 路 径 测 试 演化 而 来 的 ,对 程序 中 语句 或 指令 的 执行 顺序 进行 控 
制 ,其 主要 目标 是 选择 测试 用 例 以 满足 代码 的 各 种 覆盖 准则 。 控 制 结构 测试 通常 包括 对 判 
定 的 测试 ,对 循环 的 测试 ,对 数据 流 的 测试 等 。 

下 面 给 出 一 段 代 码 示例 ,本 节 后 续 小 节 将 结合 该 代码 开展 相关 介绍 。 

问题 描述 : NextDate 是 一 个 函数 ,作用 是 根据 输入 的 日 期 (年 月. 日) 计算 后 一 天 的 日 
期 。 假 设 NextDate 函数 接收 的 输入 值 均 为 合法 值 . 对 输入 值 是 否 合法 的 判断 在 其 他 函数 
中 完成 ,在 此 不 再 列 出 。 

函数 实现 : 列 出 NextDate 函数 的 代码 如 下 : 
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3.1.2 和 白 盒 测试 基础 


1. 控制 流 图 和 程序 图 

白 盒 测试 依赖 于 程序 的 结构 , 需 定义 一 种 程序 的 表示 方式 。 控 制 流 图 是 一 种 刻画 程序 
结构 和 光 辑 流 的 方法 ,任何 过 程 设计 都 可 以 转换 为 控制 流 图 。 

在 控制 流 图 中 ,线条 和 箭头 表示 流 控 制 , 称 为 边 ; 圆 圈 表 示 一 个 或 多 个 动作 , 称 为 节点 
由 边 和 节点 围 成 的 范围 称 为 区 域 。 如 果 一 个 节点 包含 判定 条 件 , 称 为 谓词 节点 。 不 同 程序 
结构 的 控制 流 图 表示 如 图 3-2 所 示 。 


顺序 选择 a 选择 b 


E996. 


图 3-2 程序 图 的 图 形 符号 


程序 图 可 以 看 作 是 压缩 后 的 控制 流 图 ,也 是 一 种 特殊 形式 的 有 向 图 ,上 述 NextDate 也 
数 的 程序 图 如 图 3-3 所 示 , 图 中 数字 对 应 源 代码 中 的 语句 编号 ,K1、K2、K3 为 语句 段 ,其 中 
K1 表示 语句 1 一 4,K2 表示 语句 26 一 29.K3 表示 语句 39 一 40。 

程序 图 中 每 个 节点 代表 一 段 语句 片段 (包含 一 条 或 多 条 语句 ) ,每 条 有 向 边 表示 程序 执 
行 的 走向 。 对 一 段 程序 源 代 码 构造 其 对 应 的 程序 图 ,应 遵循 如 下 的 压缩 原则 : 

(1) 剔除 注释 诸 句 ,注释 不 参与 实际 程序 执行 ,对 程序 结构 不 产生 任何 影响 ; 

(2) 剔除 数据 变量 的 声明 语句 ,此 处 的 声明 语句 特 指 不 进行 初始 化 .只 声明 了 变量 类 型 
的 语句 ,进行 初始 化 或 赋值 的 语句 不 在 此 列 ; 

(3) 所 有 连续 的 串 行 语 句 压缩 为 一 个 节点 , 即 忽 略 子路 径 上 经 过 的 语句 条 数 ,无 论 某 条 
子路 径 包 含 多 少 语句 ,只 要 不 存在 执行 分 支 ,一 律 压缩 为 一 个 节点 ,与 变量 无 关 ; 

(4) 所 有 循环 次 数 压 缩 为 一 次 循环 , 即 忽略 循环 次 数 ,无 论 某 个 循环 结构 将 循环 多 少 
次 , 仅 考虑 执行 循环 体 和 不 执行 循环 体 这 两 种 情况 .与 程序 拓扑 无 关 。 

NextDate 的 压缩 后 的 程序 图 如 图 3-4 所 示 , 图 中 每 个 字母 表示 一 段 或 一 条 语句 ,对 应 
关系 如 下 所 示 。 在 未 特别 指明 的 情况 下 ,下文 将 以 图 3-4 作为 示例 进行 计算 和 介绍 。 
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图 3-3 NextDate 的 程序 图 图 3-4 ”NextDate 的 程序 图 (压缩 后 ) 
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2. 圈 复 杂 度 

圈 复 杂 度 ,又 称 环 复杂 度 或 McCabe 复杂 性 度量 ,是 一 种 对 程序 结构 复杂 度 的 度量 模 
型 ,由 McCabe 于 1982 年 提出 :其 基本 思想 是 基于 判定 节点 对 程序 图 封闭 圈 数 目 造成 的 影 
响 来 衡量 程序 的 复杂 程度 。 根 据 圈 复 杂 度 .可 以 得 出 一 个 程序 结构 中 独立 路 径 的 数目 ,以 及 
确保 每 条 语句 被 执行 一 次 要 生成 的 测试 用 例 数目 的 上 限 。 
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计算 一 个 程序 的 圈 复 杂 度 .有 3 种 方式 : 观察 法 .公式 法 和 谓词 节点 法 。 下 面 以 图 3-4 
为 例 分 别 介 绍 。 

1) 观察 法 

观察 法 指 根据 圈 复杂 度 的 定义 ,直观 观察 程序 图 将 二 维 平面 分 隔 成 的 封闭 区 域 和 开放 
区 域 的 个 数 。 对 于 图 3-4, 其 中 封闭 区 域 有 5 个 : 

区 域 1, 由 节点 A、B、C.D、H 所 围 成 ; 

区 域 2, 由 节点 C.D、E、F、H 所 围 成 ; 

区 域 3, 由 节点 EF、G、H 所 围 成 ; 

区 域 4, 由 节点 H、I、J、K、M 所 围 成 ; 

区 域 5, 由 节点 J.K、L、M 所 围 成 ; 

另外 还 有 1 个 外 部 的 开发 区 域 。 因 此 ,该 程序 图 的 圈 复 杂 度 为 6。 

2) 公式 法 

可 利用 程序 图 中 边 ,节点 和 开放 区 域 的 数目 .使 用 如 下 公式 计算 圈 复 杂 度 : 

v(G) =e—n+2p 

其 中 ,wv(G) 表 示 圈 复杂 度 .e 表示 图 中 边 的 数目 ,n 表示 图 中 节点 的 数目 ,p 表示 图 中 未 连接 
部 分 ( 即 不 封闭 区 域 ) 的 数目 。 

对 于 图 3-4,v(G) 二 17 一 13 十 2X1==6, 该 程序 图 的 圈 复 杂 度 为 6。 

3) 谓词 节点 法 

如 果 程 序 图 中 一 个 节点 包含 判定 条 件 , 称 为 谓词 节点 。 可 利用 独立 谓词 节点 的 数目 ,使 
用 如 下 公式 计算 圈 复 杂 度 : 

v(G) = D+1 

其 中 ,D 表示 图 中 独立 谓词 节点 的 数 日 。 请 注意 ,所 谓 的 独立 谓词 节点 数 日 不 应 简单 地 认 
为 是 程序 图 中 判定 节点 的 个 数 ,事实 上 ,分 支 大 于 2 的 判定 节点 可 以 被 拆 分 成 多 个 仅 含 两 个 
分 支 的 判定 节点 。 因 此 , 当 程 序 中 的 判定 节点 均 为 两 分 支 的 判定 时 (包括 循环 节点 ) ,可 将 每 
个 判定 节点 视 为 一 个 独立 谓词 节点 ;而 当 判 定 节点 为 n( 大 于 2) 的 分 支 时 ,该 判定 节点 应 视 
为 (2 一 1) 个 独立 谓词 节点 。 

对 于 图 3-4, 节 点 A、C\E、H ,J 为 独立 谓词 节点 ,一 共有 5 个 ,所 以 ,该 程序 图 的 圈 复 杂 
度 为 6。 

3. 图 矩阵 

图 矩阵 是 一 种 有 用 的 基本 路 径 分 析 工 具 。 图 矩阵 是 一 个 方 阵 , 其 大 小 ( 行 和 列 的 数目 ) 
为 流 图 中 节点 的 数目 , 行 或 列表 示 流 图 的 节点 ,矩阵 中 的 元 素 表 示 流 图 的 边 。 表 3-1 给 出 了 
图 3-4 的 图 矩阵 ,可 以 看 到 图 矩阵 就 是 一 个 表示 流 图 的 表格 。 

表 3-1 NextDate 程序 图 的 图 矩阵 
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续 表 
A B C D J K 下 M 
D 
E 
F 
G 
H el2 
I el3 
J el4 el5 
K el6 
L el7 
M 
给 图 矩阵 中 每 个 元 素 增加 一 个 连接 权 值 ,图 矩阵 可 被 用 于 评估 程序 控制 结构 。 权 值 可 
以 表示 不 同 的 含义 ,比如 : 节点 之 间 的 连接 存在 或 不 存在 ,通常 用 "1 或 “0 表示 ;一 个 连接 
( 边 ) 被 执行 的 概率 ;在 经 历 一 个 连接 时 所 需 的 处 理 时 间 ;在 处 理 连接 时 所 需 的 内 存 或 其 他 资 


源 等 。 





:为 示意 ,把 表 3-1 中 的 边 用 “1” 替 代 , 表 示 该 连接 存在 ,给 出 表 3-1 的 连接 矩阵 ,如 










































































表 3-2 所 示 。 连 接 和 矩阵 可 用 于 计算 程序 的 圈 复 杂 度 
表 3-2 连接 矩阵 及 圈 复 杂 度 
A B C D EE J K L M 连接 

A 0 1 1 0 0 0 0 0 0 2 一 1 一 1 
B 0 0 0 0 0 0 0 0 0 1 一 1 一 0 
‘ 0 0 0 1 1 0 0 0 0 0 0 0 0 = 
D 0 0 0 0 0 0 0 1 0 0 0 0 0 1 一 1 一 0 
E 0 0 0 0 0 1 1 0 0 0 0 0 0 2—1=1 
F 0 0 0 0 0 0 0 i 0 0 0 0 0 1 一 1 一 0 
G 0 0 0 0 0 0 0 1 0 0 0 0 0 1 一 1 一 0 
H 0 0 0 0 0 0 0 0 1 1 0 0 0 2—1=1 
I 0 0 0 0 0 0 0 0 0 0 0 0 1 1 一 1 一 0 
J 0 0 0 0 0 0 0 0 0 0 1 lL 0 2—1=1 
K 0 0 0 0 0 0 0 0 0 0 0 0 1 1 一 1 一 0 
0 0 0 0 0 0 0 0 0 0 0 0 1 Ll— l=0 
M 0 0 0 0 0 0 0 0 0 0 0 0 0 0 

连接 总 数 5 

冉 复 杂 度 5 十 1 一 6 
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3.1.3 基本 路 径 测试 


1. 基本 原理 

从 程序 入 口 到 程序 出 口 之 间 存 在 许多 可 能 的 路 径 。 对 于 判断 语句 ,路 径 数目 可 能 会 加 
倍 ;对 于 switch-case 语句 ,路 径 数目 依赖 于 分 支 数 目 ; 对 于 循环 语句 ,路 径 数 目 随 着 循环 变 
量 值 增加 而 增 大 。 总 之 ,对 于 一 段 即 使 是 比较 简单 的 程序 ,要 达到 完全 路 径 覆 盖 也 是 非常 困 
难 的 。 基 本 路 径 测 试 是 一 种 较 好 的 完全 路 径 覆 盖 的 变通 方法 。 

基本 路 径 测试 的 基本 原理 是 : 如 果 将 全 路 径 集合 看 作 是 一 个 向 量 空间 ,把 从 全 路 径 集 
合 中 抽取 的 一 组 线性 无 关 的 独立 路 径 看 作 是 一 组 向 量 基 ,根据 基于 向 量 空 间 和 向 量 基 的 理 
论 可 知 ,全 路 径 集合 中 的 所 有 路 径 可 由 这 组 独立 路 径 的 某 种 组 合 方式 来 遍历 ,因此 ,只 需 对 
这 组 独立 路 径 进行 了 测试 ,就 等 价 于 对 全 路 径 进 行 了 测试 。 这 组 独立 路 径 就 成 为 基 路 径 或 
基本 路 径 。 基 本 路 径 测试 的 基本 原理 如 图 3-5 所 示 。 


图 3-5 基本 路 径 测试 的 原理 





基本 路 径 测试 的 目标 是 : 

(1) 测试 的 完备 性 , 即 通过 对 独立 路 径 的 测试 达到 对 所 有 路 径 的 测试 覆盖 ， 

(2) 测试 的 无 元 余 性 。 每 条 路 径 都 是 独立 的 ,设计 的 测试 用 例 之 间 不 存在 元 余 。 

抽取 的 基本 路 径 需 满足 如 下 要 求 : 

(1) 任意 两 条 基本 路 径 线性 无 关 ; 

(2) 所 有 基本 路 径 的 并 是 整个 向 量 空间 , 即 任意 一 条 路 径 都 可 以 转化 为 某 一 条 或 几 条 
基本 路 径 的 组 合 遍历 。 


2. 测试 设计 

基本 路 径 测试 的 主要 步 又 包括 : 以 代码 /设计 为 基础 画 出 程序 图 ;计算 基本 路 径 集合 的 
规模 ;抽取 基本 路 径 ;生成 测试 用 例 。 结 合 NextDate 程序 进行 介绍 。 

1) 画 出 程序 图 

根据 NextDate 程序 代码 (此 处 略 ,请 见 前 面 章 节 ), 得 到 程序 图 , 见 图 3-4。 

2) 计算 基本 路 径 集合 的 规模 

基本 路 径 的 个 数 等 于 圈 复 杂 度 。 对 于 NextDate 程序 ,基于 程序 图 可 得 圈 复杂 度 是 6， 
其 基本 路 径 集合 的 规模 也 为 6。 

3) 抽取 基本 路 径 

第 一 ,确定 主 路 径 。 从 所 有 路 径 中 .找到 一 条 最 复杂 的 路 径 作为 主 路 径 。 所 谓 的 最 复杂 
体现 在 : 
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(1) 主 路 径 应 包含 尽 可 能 多 的 判定 节点 (包括 条 件 判 定 和 循环 判定 节点 ) ,判定 节点 越 
多 ,路 径 越 复杂 。 

(2) 主 路 径 应 包含 尽 可 能 复杂 的 判定 表达 式 , 判 定 表达 式 包 含 的 变量 数量 和 “与 “或 ” 
关系 越 多 ,路径 越 复杂 ; 当 判 定 节点 相同 时 , 取 判 定 表达 式 复杂 的 为 主 路 径 。 

(3) 主 路 径 应 对 应 尽 可 能 高 的 执行 概率 ,每 个 判定 节点 取 不 同 分 支 的 概率 并 不 相同 , 当 
不 同 路 径 包含 相同 数量 的 判定 节点 时 ,可 根据 一 定 规则 来 计算 每 条 路 径 的 执行 概率 (比如 ， 
所 包含 的 所 有 判定 分 支 执行 概率 的 乘积 ) ,执行 概率 越 高 的 路 径 越 复杂 。 

(4) 主 路 径 应 包含 尽 可 能 多 的 语句 ,在 相同 执行 概率 的 情况 下 ,比较 路 径 所 包含 的 原始 
语句 的 数量 , 取 语 句 数量 多 的 为 主 路 径 。 

第 二 ,根据 主 路 径 抽取 其 他 基本 路 径 。 

基于 主 路 径 , 依 次 在 该 路 径 的 每 个 判定 节点 处 执行 一 个 新 的 分 支 ,构建 一 条 新 的 基本 路 
径 , 直 至 找到 足够 的 基本 路 径 数 。 当 主 路 径 上 所 有 的 判定 节点 处 的 每 个 分 支 都 已 覆盖 ,但 仍 
不 能 达到 指定 数量 的 基本 路 径 时 ,应 查找 程序 中 尚未 完全 覆盖 的 判定 分 支 并 构建 基本 路 径 。 
构建 基本 路 径 时 , 仍 可 按照 判断 表达 式 的 复杂 度 、 路 径 执行 概率 、 路 径 包含 语句 数 等 原则 
进行 。 

对 于 NextDate 程序 ,其 基本 路 径 集合 为 : 

Path1: A-C-E-G-H-J-K-M( 主 路 径 ); 

Path2: A-B-H-J-K-M( 在 判定 节点 A 处 执行 el 分 支 ); 

Path3: A-C-D-H-J-K-M( 在 判定 节点 C 处 执行 e4 分 支 ); 

Path4: A-C-E-F-H-J-K-M( 在 判定 节点 下 处 执行 e7 分 支 ); 

Path5: A-C-E-G-H-I-M( 在 判定 节点 H 处 执行 ell 分 支 ) ; 

Path6: A-C-E-G-H-J-L-M( 在 判定 节点 丁 处 执行 e15 分 支 ) 。 

4) 处 理 不 可 行路 径 

上 面 步 又 完全 是 基于 程序 图 进行 的 ,而 由 于 业务 迪 辑 、 程 序 缺 陷 等 原因 ,得 到 的 基本 路 
径 有 可 能 是 不 可 行路 径 . 需 要 对 不 可 行路 径 进 行 处 理 ,通常 有 2 种 处 理 方法 : 

(1) 在 不 可 行路 径 中 , 找 出 所 有 判定 节点 ,进入 男 一 个 分 支 , 直 到 得 到 符合 业务 敢 辑 的 
路 径 为 止 ; 

(2) 找到 不 可 行路 径 , 通 过 人 工 干 预 方式 得 到 一 条 符合 业务 多 辑 的 路 径 。 

对 于 NextDate 程序 ,Path6 执行 A-C-E-G 语句 ,说 明 函 数 输入 为 2 月 (并 且 非 闽 年 ) ,从 
而 不 可 能 再 执行 判定 节点 丁 处 的 el5 分 支 到 达 L( 跨 年 ,只 有 12 月 才 可 以 ) ,因此 ,Path6 为 
不 可 行路 径 。 

由 于 所 有 判定 节点 的 每 个 分 支 都 已 覆盖 .通过 人 工 干预 方式 选 定 一 条 新 路 径 作 为 
Path6: 

Path6: A-B-H-I-M( 发 生 几 率 最 大 )。 

5) 设计 测试 用 例 

根据 上 面 得 到 的 基本 路 径 设 计 对 应 的 测试 用 例 。 

对 于 NextDate 程序 ,针对 基本 路 径 Path1 一 Path6 ,每 条 路 径 至 少 设计 一 个 测试 用 例 ， 
得 到 测试 用 例 集合 如 表 3-3 所 示 。 
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表 3-3 ”NextDate 的 测试 用 例 集 



































测试 用 例 ID 输 入 预期 输出 

NextDate_01 | 2015-2-28 2015-3-1 对 应 Pathl 
NextDate_02 | 2015-7-31 2015-8-1 对 应 Path2 
NextDate_03 | 2015-6-30 2015-7-1 对 应 Path3 
NextDate 04 | 2012-2-29 2012-3-1 对 应 Path4 
NextDate_05 | 2015-2-20 2015-2-21 对 应 Path5 
NextDate 06 2015-1-15 2015-1-16 对 应 Path6 





3. 基本 路 径 测试 技术 分 析 

基本 路 径 测 试 既 有 优点 ,也 有 局 限 。 

首先 ,在 理论 上 基本 路 径 测试 保证 了 测试 的 完备 性 和 无 元 余 性 ,并 且 可 以 大 幅 降 低 测试 
用 例 的 数量 。 根 据 基 本 路 径 的 抽取 原则 .如 果 所 有 要 测试 的 路 径 是 一 个 向 量 空间 的 话 , 基 本 
路 径 集 就 是 一 组 向 量 基 ,任意 其 他 路 径 均 可 由 基本 路 径 的 有 限 组 合 得 到 。 

其 次 ,不 可 行路 径 的 存在 可 能 会 破坏 基本 路 径 测试 的 完备 性 和 无 宛 余 性 。 不 可 行路 径 
可 能 是 由 于 程序 缺陷 或 不 存在 的 业务 浊 辑 等 原因 造成 的 ,不 可 行路 径 的 存在 表明 程序 代码 
是 不 完备 的 。 当 然 , 根 据 程序 实际 应 用 场景 或 其 他 客观 需求 ,不 一 定 非 要 消除 不 可 行路 径 ， 
但 至 少 指出 了 程序 代码 优化 的 方向 。 

第 三 ,基本 路 径 测试 是 基于 程序 图 的 ,对 串 行 语句 长 度 和 循环 次 数 不 敏 感 ,能 够 保证 覆 
盖 到 每 个 判定 决策 ,并 且 能 进一步 保证 对 所 有 相互 独立 的 判定 决策 结果 进行 测试 , 相 比 于 判 
定 覆 盖 指 标 更 加 健壮 ;但 同时 ,基本 路 径 测试 不 考虑 每 个 分 支 的 执行 概率 以 及 每 条 路 径 针 对 
各 数据 变量 的 行为 .与 程序 代码 的 实际 情况 是 不 吻合 的 ,无 法 验证 程序 是 否 正 确实 现 预 期 功 
能 ,无 法 发 现 程序 违反 设计 规范 之 处 ,也 很 可 能 发 现 不 了 那些 与 数据 相关 的 错误 或 用 户 操 作 
相关 的 缺陷 。 

第 四 ,基本 路 径 可 能 是 程序 代码 中 执行 概率 很 低 的 路 径 。 当 然 也 不 能 否认 ,执行 概率 低 
的 路 径 往 往 是 最 有 可 能 存在 缺陷 的 路 径 。 

最 后 ,基本 路 径 测试 思想 可 用 于 任何 动态 模型 中 。 在 单元 测试 阶段 ,基本 路 径 测试 方法 
可 主要 用 于 对 程序 源 代码 的 执行 测试 ;在 集成 测试 或 系统 测试 阶段 ,基本 路 径 测试 方法 可 主 
要 用 于 对 业务 流程 、 页 面 跳 转 等 类 似 动态 执行 路 径 的 测试 。 


3.1.4 控制 结构 测试 


基本 路 径 测 试 是 简单 而 高 效 的 ,但 有 时 还 不 能 满足 测试 要 求 。 由 基本 路 径 测试 演化 而 
来 的 控制 结构 测试 不 仅 拓宽 了 测试 覆盖 准则 ,而 且 能 够 提高 白 盒 测试 的 质量 。 

条 件 判 定 和 循环 是 两 类 最 重要 的 控制 结构 。 

首先 介绍 对 条 件 判定 的 测试 ,条件 判定 测试 的 覆盖 准则 有 语句 覆盖 、 判 定 覆盖 条件 覆 
盖 等 多 种 ,为 便于 说 明 .结合 一 段 简单 的 代码 进行 介绍 。 
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代码 对 应 的 流程 图 如 图 3-6 所 示 。 该 代码 包含 4 个 简单 判定 条 件 ,分别 是 : CT1)a 二 0、 
(T2)0 一 0 CT3)a= 王 1、CT4)z 二 10。 该 代码 共有 4 条 执行 路 径 ,分 别 是 (P13)pl 十 p3、 
(P24)pl+p4、(P23)p2 二 p3、(P24)p2 十 p4。 


pl 





p3 





图 3-6 函数 Samplel 的 流程 图 


需要 注意 的 是 ,在 上 面 代码 中 ,没有 else 语句 ,两 个 判定 节点 均 有 隐 式 分 支 。 这 可 能 不 影 
响 代码 的 正确 性 ,但 不 是 良好 的 编程 习惯 ,容易 导致 缺陷 ,这 可 从 后 续 的 测试 设计 中 体现 出 来 。 


1. 语句 覆盖 

1) 会 义 

语句 覆盖 也 称 行 覆 盖 、 段 覆盖 或 基本 块 覆盖 .用 于 度量 程序 代码 可 执行 语句 被 执行 的 比 
率 。 满 足 语句 覆盖 , 指 的 是 程序 代码 可 执行 语句 至 少 被 执行 一 遍 , 包 括 条 件 分 支 中 包含 的 语 
名 也 要 被 执行 到 。 即 一 个 测试 用 例 集合 T= 二 fa :ee :站 } 满 足 语句 覆盖 准则 , 当 且 仅 当 
对 流程 图 中 的 任何 节点 v€V, 存 在 测试 用 例 i; 及 其 相应 执行 路 径 P;, 使 得 vE P;。 语 句 柳 
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盖 等 同 于 对 图 中 所 有 节点 的 覆盖 。 
2) 示例 
为 Samplel 设计 如 表 3-4 所 示 的 测试 用 例 , 均 满足 语句 覆盖 。 


表 3-4 语句 覆盖 的 测试 用 例 













预期 输出 





经 过 路 径 | 语句 覆盖 






















ID 
元 | 区 

TC1-01 1 | 1 10 | 本 | 100% 

TC2-01 2 | p2 十 p4 | 100% 

TC3-01 10 p2 十 p4 100% 









由 于 Samplel 的 两 个 判定 表达 式 的 取 假 分 支 都 不 包含 执行 语句 ,为 满足 语句 覆盖 , 设 
计 的 测试 用 例 只 需 执 行路 径 p2 十 p4 即 可 。 语 句 覆盖 对 隐 式 分 支 无 效 。 


3) 分 析 
语句 覆盖 是 所 有 覆盖 准则 中 最 弱 的 一 个 , 既 有 优点 也 有 缺点 ,主要 包括 : 





(1) 假设 故障 在 整个 代码 中 均匀 分 布 ,语句 覆盖 率 能 够 反映 故障 发 现 的 百分比 ; 

(2) 语句 覆盖 对 控制 结构 不 敏感 ,尤其 对 则 辑 操作 符 完 全 不 敏感 ; 

(3) 语句 覆盖 不 区 分 循环 语句 ,不 能 确定 循环 是 否 到 达 终 止 条 件 ; 

(4) 在 语句 覆盖 中 ,测试 用 例 数目 一 般 与 分 支点 更 相关 ; 

(5) 在 保证 所 有 语句 被 执行 的 情况 下 ,很 难 对 测试 用 例 数目 进行 最 小 化 。 

2. 判定 覆盖 

1) 含义 

判定 覆盖 也 叫 分支 覆 盖 , 指 的 是 程序 代码 中 每 个 判定 节点 的 取 真 和 取 假 分 支 都 被 至 少 
执行 一 次 。 判 定 覆 盖 等 同 于 对 图 中 所 有 边 的 覆盖 。 


























2) 示例 
为 Samplel 设计 如 表 3-5 所 示 的 测试 用 例 集合 TC4、TC5 , 均 满 足 语句 覆盖 和 判定 覆盖 。 
表 3-5 判定 覆盖 的 测试 用 例 
ID 语句 覆盖 判定 苯 盖 
TC4-01 1 
100% 100% 
TC4-02 0 
TC5-01 10 
100% 100% 
TC5-02 1 
3) 分 析 
判断 覆盖 需 覆 盖 到 每 一 条 执行 边 .测试 重点 转向 判定 节点 ,生成 的 测试 用 例 的 数目 相对 





ez 系 叫 


于 诸 句 覆盖 有 所 增加 , 比 语句 覆盖 具有 更 强 的 测试 覆盖 能 力 。 满 足 判 定 覆盖 的 ,一定 满足 百 
分 之 百 语 句 覆盖 。 


a 
a 
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但 是 ,判定 表达 式 多 为 复合 判定 , 即 由 多 个 简单 判定 条 件 通过 “与 ”或 "关系 组 合 
而 成 ,而 判定 覆盖 指标 并 未 分 析 每 个 简单 判定 条 件 的 取 值 情况 , 仍 可 能 会 导致 遗漏 部 
分 缺陷 。 

3. 条 件 覆 盖 

1) 含义 

条 件 覆 盖 指 的 是 ,程序 代码 每 个 判定 表达 式 中 的 每 个 条 件 的 取 真 和 取 假 情况 至 少 被 执 
行 一 次 。 

2) 示例 

对 于 Samplel ,为 满足 条 件 覆 盖 , 就 是 要 使 得 简单 判定 条 件 T1 一 T4 的 取 真 和 取 假 分 支 
至 少 执行 一 遍 , 设 计 测试 用 例 集合 TC6 如 表 3-6 所 示 。 


表 3-6 条 件 覆盖 的 测试 用 例 1 





经 过 | 条 件 | 判定 

re | ks 

TC6-01 a 6 呈 | 亏 总 
TC6-02 | 一 一 2 a bp 





可 以 看 出 ,测试 用 例 集合 TC6 满足 条 件 覆 盖 , 但 却 不 满足 判定 覆盖 。 即 满足 条 件 覆 盖 
的 不 一 一 定 能 够 汪 足 判 定 覆 盖 。 当 然 可 以 设计 测试 用 例 集合 ,使 其 及 满足 条 件 覆 盖 又 满足 判 
定 覆 盖 , 如 表 3-7 所 示 。 
表 3-7 条 件 覆 盖 的 测试 用 例 2 


条 件 | 判定 
种 盖 | 六 





100% | 100% 





3) 分 析 

在 介绍 判定 覆盖 时 .我们 说 判定 覆盖 指标 只 是 要 求 每 个 判定 节点 的 取 真 和 取 假 分 支 都 
被 至 少 执行 一 次 ,并 未 要 求 复合 判定 中 的 每 个 简单 判定 条 件 的 每 种 取 值 至 少 执行 一 次 ;而 条 
件 覆 盖 指 标 有 了 此 要 求 , 即 每 个 判定 表达 式 中 的 每 个 条 件 的 取 真 和 取 假 情况 至 少 被 执行 一 
次 ,但 却 没有 要 求 每 个 判定 节点 的 取 真 和 取 假 分 支 都 被 至 少 执行 一 次 。 所 以 判定 覆盖 和 条 
件 覆 盖 是 互 不 包含 的 。 


4. 条 件 / 判 定 覆盖 

1) 定义 

为 了 同时 满足 对 判定 表达 式 所 有 分 支 的 覆盖 以 及 对 判定 表达 式 中 每 个 简单 判定 条 件 的 
取 值 覆盖 ,引入 条 件 / 判 定 覆盖 指标 。 条 件 /判定 覆盖 指标 指 的 是 ,测试 用 例 的 设计 应 满足 判 
定 节点 的 取 真 和 取 假 分 支 至 少 执行 一 次 .并 且 每 个 简单 判定 条 件 的 取 真 和 取 假 情况 也 至 少 
执行 一 次 , 即 同时 满足 判定 覆盖 和 条 件 覆 盖 。 
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2) 示例 

对 于 Samplel, 为 满足 条 件 /判定 覆盖 .设计 如 表 3-7 所 示 的 一 组 测试 用 例 即 可 。 

3) 分 析 

条 件 / 判 定 覆盖 对 判定 表达 式 的 整体 和 局 部 同时 进行 覆盖 ,是 一 个 较为 完善 的 覆盖 指 
标 。 不 过 ,设计 符合 条 件 / 判 定 覆盖 指标 要 求 的 测试 用 例 往往 不 是 一 件 容 易 的 事情 。 有 
上 对 ,我 们 可 以 通过 修改 程序 结构 ,把 复合 判定 表达 式 拆 分 成 多 个 简单 判定 表达 式 , 消 除 复 
合 判 定 表达 式 中 的 “与 “或 "关系 ,达到 简化 判定 节点 的 目的 ;然后 ,只 需 简单 使 用 判定 覆 
盖 就 可 以 保证 最 终 的 测试 用 例 同时 满足 条 件 覆盖 。 但 是 ,也 应 该 注意 到 ,把 复合 判定 表 
达 式 拆 分 成 多 个 简单 判定 表达 式 时 ,往往 会 提高 程序 结构 的 复杂 性 ,导致 语句 数目 .路 径 
数目 的 大 幅 增加 。 

5. 条 件 组 合 覆盖 

1) 定义 

条 件 组 合 覆 盖 指 的 是 程序 代码 中 全 部 判定 节点 的 每 个 简单 判定 条 件 的 所 有 可 能 取 值 组 
合 至 少 被 执行 一 次 。 假 设 代 码 中 有 2 个 判定 节点 , 且 每 个 判定 节点 各 包含 2 个 简单 条 件 , 则 
此 4 个 条 件 就 有 2 一 16 种 组 合 ,满足 条 件 组 合 覆 盖 意 味 着 要 覆盖 这 16 种 组 合 。 

2) 示例 

对 于 Samplel ,为 满足 条 件 组 合 覆 盖 ,设计 测试 用 例 集合 TC8 如 表 3-8 所 示 。4 个 简单 
判定 条 件 共产 生 16 种 组 合 , 但 有 4 种 情况 不 可 能 发 生 , 因 为 当 简单 条 件 Tl 取 假 时 ( 即 “到 
0),T3 只 可 能 取 假 ( 即 a 去 1) .不 可 能 取 真 。 所 以 .最 终 产生 12 个 测试 用 例 。 

表 3-8 条件 组 合 覆 盖 的 测试 用 例 


Re 



































输入 有 简单 判定 条 件 经 过 

下 a b c 7 党 TT | TE 路 径 站 
TC8-01 1 1 11 0 二 工 Pp2 十 p4 
Tc8-02 | 1 1 | 10 0 生 F p2 十 p4 
TC8-03 | 2 和 问 0 F T p2 十 p4 
TC8-04 | 2 1 | 10 0 F F p2 十 p3 
TC8-05 | 1 1 0 11 至 第 pl+p4 
TC8-06 1 1 0 0 征 F pl 十 p4 
TC8-07 | 2 1 0 11 F T pl+p4 
TC8-08 | 2 1 0 0 F F p1 十 p3 
TC8-09 1 0 11 F T pl+p4 
TC8-10 1 0 10 F F pl+p3 
TC8-11 1 1 0 11 F T pl+p4 
TC8-12 1 1 0 10 F F pl+p3 

不 存在 此 情况 


























软件 测试 实用 方法 与 技术 








3) 分 析 

条 件 组 合 覆 盖 是 以 上 指标 中 最 完备 的 ,满足 条 件 组 合 覆 盖 就 意味 着 一 定 同时 满足 判定 
覆盖 和 条 件 覆 盖 ; 但 是 .在 判定 表达 式 比 较 复杂 且 多 个 判定 节点 串联 时 ,条 件 组 合 覆 盖 产 生 
的 测试 用 例 的 规模 将 会 很 大 ,实践 中 很 可 能 难以 实现 。 


6. 修正 的 条 件 / 判 定 覆 盖 

1) 定义 

修正 的 条 件 /判定 覆盖 (MC/VDC) 指 的 是 ,在 条 件 /判定 覆盖 的 基础 上 ,引入 对 简单 条 件 
的 独立 影响 性 的 分 析 ,减少 条 件 /判定 柳 盖 产生 的 元 余 测 试用 例 。 

修正 的 条 件 / 判 定 覆 盖 要 求 : 判定 中 每 个 简单 条 件 的 所 有 可 能 结果 至 少 出 现 一 次 ,每 个 
判定 本 身 的 所 有 可 能 结果 也 至 少 出 现 一 次 ,每 个 入口 点 和 出 口 点 至 少 要 执行 一 次 ,并 且 每 个 
简单 条 件 都 能 单独 影响 判定 结果 。 

所 谓 独立 影响 是 指 在 判定 中 其 他 条 件 不 变 的 情况 下 ,该 条 件 的 取 值 改变 能 引起 整个 判 
定 结果 的 改变 。 比 如 在 条 件 B 必须 为 True、 条 件 C 必须 为 False 的 情况 下 ,判定 结果 因 条 
件 A 的 取 值 变化 而 变化 ,就 称 此 时 条 件 A 独立 影响 判定 结果 。 

修正 的 条 件 / 判 定 覆 盖 的 一 般 步骤 是 : 

(1) 列 出 所 有 的 简单 判定 条 件 ,构建 真 值 表 ; 

(2) 对 每 个 简单 判定 条 件 ,找到 能 对 整个 判定 结果 产生 独立 影响 的 多 组 测试 用 例 , 称 为 
独立 影响 对 ; 

(3) 抽取 能 体现 所 有 简单 判定 条 件 独 立 影响 性 的 最 少 独立 影响 对 ,就 得 到 满足 要 求 的 
测试 用 例 集 。 

2) 示例 
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对 于 程序 Sample2 ,共有 1 个 判定 包含 4 个 简单 条 件 ,设计 如 下 表 所 示 5 个 测试 用 例 能 
满足 MC/DC 覆盖 率 。 














3) 分 析 

修正 的 条 件 / 判 定 覆 盖 继 承 了 条 件 组 合 覆 盖 的 优点 ,并 且 有 效 控制 了 测试 用 例 的 数量 ， 
是 一 种 较 好 的 覆盖 测试 指标 。 它 能 发 现 的 主要 软件 问题 包括 : 操作 符 错误 ,比如 “与 ”被 误 
写 为 "或 ;变量 取 反 错误 , 即 一 个 变量 被 误 写 为 它 的 否定 :表达 式 取 反 错误 , 即 一 个 表达 式 被 
误 写 为 它 的 否定 。 

在 多 个 判定 有 关联 的 情况 下 ,修正 的 条 件 / 判 定 覆 盖 存 在 缺点 。 比 如 假设 有 两 个 判定 
A=B OR C 和 E=A AND D, 如 果 分 别 计算 , 则 共有 4 个 条 件 B.C、A、D, {BCD}=={TFT， 
FTF, FFT} 就 能 达到 100%MC/DC 覆盖 。 但 是 .由 于 和 A 的 取 值 实际 上 是 由 B 和 C 确定 的 ， 
即 上 述 两 个 判定 等 价 于 E=((B OR C) AND D) ,而 此 时 {BCD}) 二 {TFT, FTF, FFT)} 就 不 
足以 达到 100%MC/DC 覆盖 ,因为 C 和 D 都 没有 单独 影响 判定 结果 下 。 因 此 ,对 于 则 辑 等 
价 的 两 种 情况 ,可 能 需要 不 同 的 测试 用 例 集 才 能 达到 100%MC/DC 覆盖 。 


7. 对 循环 的 测试 

循环 是 程序 代码 中 除 条 件 判定 之 外 的 另 一 类 重要 的 控制 结构 。 重 复 多 次 循环 容易 导致 
数据 结构 越界 、 内 存 泄漏 等 典型 错误 。 因 此 .对 循环 的 测试 的 基本 思想 是 : 重点 关注 循环 的 
过 程 正 确 性 , 即 在 循环 的 边界 和 和 运行 界限 内 对 循环 体 的 执行 过 程 进 行 测试 。 循 环 结构 可 主 
要 分 为 3 类 : 简单 循环 、` 谋 套 循环 , 非 结构 化 循环 。 

1) 简单 循环 

简单 循环 包括 单个 循环 和 以 串联 形式 顺序 执行 的 多 个 循环 ,如 图 3-7 所 示 。 这 里 针对 
单个 循环 进行 介绍 ,串联 循环 可 类 似 执行 。 








- 


图 3-7 简单 循环 





ey 
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对 单个 循环 ,假设 最 大 循环 次 数 为 ,在 设计 测试 用 例 时 应 考虑 如 下 情况 : 
(1) 循环 0 次 , 即 不 执行 循环 体 ; 

(2) 循环 1 次 . 即 执行 一 次 循环 ; 

(3) 循环 2 次 ; 

(4) 循环 mm 次 ,m 不 大 于 nn, 通常 取 n 的 一 半 ; 

(5) 循环 2 一 1 次 ; 

(6) 循环 次 

(7) 循环 十 1 次 。 

另外 ,在 测试 过 程 中 ,还 应 注意 : 

(1) 在 循环 初始 化 时 ,应 考虑 循环 变量 的 初 值 是 否 设置 正确 , 初 值 设置 错误 时 . 必 将 会 
影响 循环 总 次 数 ; 

(2) 在 每 次 进行 循环 体内 部 后 .应 注意 循环 变量 的 增 量 是 否 
正确 ,重要 变量 的 取 值 是 否 按照 预期 规律 变化 ,多 次 循环 是 否 会 
导致 误差 累积 ,是 否 对 内 存 造成 压力 ,在 continue break 等 导致 
强制 跳 过 部 分 语句 的 情况 时 是 否 存在 错误 等 ; 

(3) 在 循环 终止 时 ,循环 变量 的 最 大 值 是 否 正确 , 即 循环 的 
终止 条 件 是 否 存在 边界 错误 ,退出 循环 的 条 件 是 否 设 置 正确 。 


2) 嵌 套 循环 
嵌 套 循环 如 图 3-8 所 示 。 当 循环 节点 以 嵌 套 形式 存在 , 且 判 
时 








定 节点 相互 独立 时 ,应 按照 由 内 至 外 的 顺序 , 先 测试 最 内 层 循 环 
图 3-8 由 套 循环 体 .逐步 外 推 ,直至 最 外 层 的 循环 体 。 在 测试 每 层 循环 体 时 , 仍 
应 根据 单个 循环 的 测试 原则 进行 .并 要 考虑 一 下 4 种 特殊 情况 ; 
(1) 内 层 最 小 循环 次 数 且 外 层 最 小 循环 次 数 时 ; 
(2) 内 层 最 小 循环 次 数 且 外 层 最 大 循环 次 数 时 ; 
(3) 内 层 最 大 循环 次 数 且 外 层 最 小 循环 次 数 时 ; 
(4) 内 层 最 大 循环 次 数 且 外 层 最 大 循环 次 数 时 。 
3) 非 结 构 化 循环 
非 结 构 化 循环 如 图 3-9 所 示 。 非 结构 化 的 程序 给 测试 带 来 很 
大 难度 , 非 结 构 化 的 循环 通常 无 法 测试 .一 般 需 重新 设计 成 结构 化 
的 循环 再 进行 测试 。 在 结构 化 前 必须 执行 测试 的 .可 参照 单个 循 
环 的 测试 原则 ,兼顾 嵌 套 循环 的 组 合 情 况 开展 。 


8. 控制 结构 测试 技术 分 析 

对 判定 的 测试 主要 是 通过 考察 程序 代码 中 复合 判定 表达 式 或 
构成 复合 判定 表达 式 的 各 简单 判定 条 件 的 所 有 取 值 情况 .来 保证 
判定 表达 式 的 正确 性 。 常 见 的 判定 测试 覆盖 指标 包括 语句 覆盖 、 
判定 覆盖 条件 覆盖 条件 /判定 覆盖 条件 组 合 覆 盖 以 及 修正 的 条 
件 / 判 定 覆盖 ,其 中 语句 覆盖 判定 覆盖 、 条 件 覆 盖 的 使 用 是 最 为 广 
泛 的 。 

对 循环 的 测试 主要 是 在 循环 的 边界 和 运行 界限 内 对 循环 体 的 ”图 3-9 非 结构 化 循环 


= 
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执行 过 程 进行 测试 。 对 于 单个 循环 , 需 测试 循环 次 数 的 边界 以 及 循环 过 程 中 循环 变量 的 初 
始 化 .递增 和 终止 条 件 等 ;对 于 多 个 顺序 执行 的 循环 ,可 参照 单个 循环 进行 测试 ;对 于 嵌 套 的 
循环 , 除 上 述 内 容 外 ,还 应 测试 内 外 循环 不 同 循环 次 数 的 边界 组 合 ;对 于 非 结 构 化 的 循环 ,一 
般 应 先 修改 为 结构 化 的 。 

控制 结构 测试 的 重点 在 于 检查 控制 结构 是 否 符合 设计 .并 不 考虑 判定 或 循环 体 所 涉 
及 的 变量 所 反映 出 的 结果 有 何 实际 意义 。 事 实 上 ,这 也 是 所 有 白 盒 测试 方法 的 局 限 
所 在 。 





3.1.5 其 他 和 白 盒 测试 技术 


1. 变异 测试 

变异 测试 是 一 种 基于 故障 的 测试 技术 ,可 用 于 创建 更 有 效 的 测试 用 例 集 。 所 谓 的 变异 
是 指 对 源 代码 中 的 特定 语句 进行 修改 ,然后 检查 测试 用 例 能 否 发 现 该 变异 引发 的 错误 。 使 
用 变异 测试 技术 ,首先 为 被 测 程序 创建 一 组 缺陷 版 本 或 变异 体 , 然 后 设计 测试 用 例 去 发 现 这 
些 缺 陷 ,而 设计 测试 用 例 的 目标 就 是 能 够 区 分 原始 程序 与 所 有 的 变异 体 。 

变异 测试 认为 : 如 果 所 有 简单 故障 都 能 被 预测 和 删除 ,那么 程序 就 已 得 到 良好 的 测试 ， 
因为 复杂 故障 是 由 简单 故障 组 合 而 成 的 ;给 定 一 组 合适 的 变异 操作 ,如 果 一 个 测试 集 杀 死 了 
这 些 操 作 产 生 的 变异 ,那么 该 测试 集 对 于 发 现 真实 故障 也 会 更 加 有 效 。 

在 变异 测试 中 ,需要 创建 程序 的 许多 版 本 ,每 个 版 本 通过 变异 植 人 一 个 故障 ,生成 变异 
体 ; 然 后 使 用 测试 用 例 运行 变异 体 ,目标 是 其 发 生 失 效 ; 如 果 引 起 失效 , 称 该 变异 体 被 杀 死 ， 
该 测试 用 例 被 保存 下 来 ;直到 所 有 的 变异 体 被 杀 死 .保留 下 来 的 所 有 测试 用 例 组 成 测试 用 例 
集 , 用 来 对 原始 程序 进行 测试 。 变 异 测试 的 过 程 如 图 3-10 所 示 。 








N 
F > E 4 等 价 变异 体 / 
测试 用 例 不 足 活跃 的 变异 体 /人 一 > ( 杀 不 死 ) 


图 3-10 变异 测试 的 过 程 
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变异 测试 的 优点 在 于 : 

(1) 能 够 发 现代 码 中 存在 歧义 及 不 明确 的 地 方 ; 

(2) 是 一 种 容易 被 自动 化 执行 的 测试 技术 ; 

(3) 至 少 与 数据 流 测试 功能 一 样 强大 ; 

(4) 通过 选择 合适 的 变异 操作 ,能 执行 更 全 面 的 测试 ; 

(5) 最 终 能 够 得 到 缺陷 更 少 和 更 可 靠 的 程序 代码 。 

变异 测试 通过 对 程序 代码 进行 重 写 ,以 发 现代 码 中 可 能 存在 的 问题 ,其 缺点 主要 有 

(1) 一 组 标准 的 变异 操作 会 产生 大 量 的 变异 体 ; 

(2) 尽管 变异 体 与 最 初 程序 不 同 , 但 它们 可 能 具有 相同 的 行为 ,而 等 价 的 变异 体 永远 不 
能 被 杀 死 ,识别 它们 很 重要 但 非常 困难 ; 

(3) 有 些 奖 固 变 异体 可 能 不 等 价 但 也 很 难 被 杀 死 ; 

(4) 为 了 区 分 变异 体 和 原始 程序 ,可 能 需要 执行 大 量 的 测试 用 例 ; 

(5) 需 测试 大 量 的 变异 体 程序 ,而 每 个 变异 体 与 原始 程序 的 规模 和 复杂 度 都 相当 。 


2. 程序 插 桩 

程序 插 桩 是 借助 于 向 被 测 程序 中 插入 代码 语句 来 实现 测试 目的 的 方法 ,是 一 种 常用 的 
有 效 测 试 方法 。 

程序 插 桩 的 基本 原理 是 ,在 不 破坏 被 测 程序 原 有 好 辑 完整 性 的 前 提 下 ,在 程序 的 相应 位 
置 插入 一 些 代码 语句 , 称 为 探测 器 或 探 针 ,检测 程序 的 运行 特征 或 输出 数据 ,并 基于 对 这 些 
数据 的 分 析 ,揭示 程序 的 内 部 行为 和 特征 。 比 如 ,在 程序 中 插入 一 些 打印 语句 ,使 得 程序 执 
行 时 可 输出 我 们 关心 的 信息 ;或 者 在 测试 某 一 操作 的 处 理 时 长 性 能 指标 时 ,在 相应 代码 的 前 
后 分 别 插入 语句 ,分 别 记录 当前 时 刻 , 然 后 通过 计算 两 个 时 刻 的 差 获 取 该 操作 的 时 长 。 

在 程序 的 特定 位 置 插入 语句 以 获取 程序 执行 的 动态 数据 ,就 像 在 刚 研 制 成 的 机 器 的 特定 
部 位 安装 记录 仪表 ,一 方面 可 检验 测试 的 结果 数据 , 另 一 方面 还 可 以 了 解 程序 的 执行 特性 , 实 
现 探查 或 监控 的 功能 .最 终 是 为 了 把 在 程序 执行 过 程 中 发 生 的 重要 事件 记录 下 来 .取得 相应 的 
测试 或 调试 信息 。 例 如 ,记录 在 程序 执行 过 程 中 某 些 变量 值 的 变化 情况 ,变化 范围 等 。 

设计 程序 插 桩 时 , 需 考虑 的 问题 主要 包括 : 

(1) 探测 哪些 信息 ; 

(2) 在 程序 的 什么 部 位 设置 探测 点 : 

(3) 需要 设置 多 少 个 探测 点 。 

这 些 问题 需要 结合 具体 情况 并 针对 程序 的 控制 结构 进行 具体 分 析 ,一 般 地 ,应 在 遵循 尽 
量 设置 较 少 探测 点 原则 的 基础 上 在 以 下 部 位 设置 探测 语句 。 

(1) 程序 块 的 第 一 个 可 执行 语句 之 前 ; 

(2) DO.DO WHILE、DO UNTIL 及 DO 终端 语句 之 后 ; 

(3) IF .ELSE IF、ELSE 语句 之 后 ; 

(4) 输入 输出 语句 之 后 ; 

(5) FOR、WHILE 语句 的 开始 前 和 结束 后 。 


3. 域 测试 
域 测试 是 一 种 基于 程序 结构 的 测试 方法 。 对 于 程序 来 说 ,每 一 条 执行 路 径 对 应 着 一 个 
输入 域 。 可 把 程序 执行 路 径 错误 分 为 3 类 : 域 错误 .计算 型 错误 和 丢失 路 径 错误 。 如 果 程 


第 3 章 动态 测试 技术 





序 的 控制 流 有 错误 .那么 对 某 一 特定 的 输入 可 能 执行 的 是 一 条 错误 路 径 , 称 为 路 径 错误 或 域 
错误 ;如 果 对 于 特定 输入 执行 的 是 正确 路 径 ,但 由 于 赋值 语句 的 错误 导致 输出 结果 不 正确 ， 
称 为 计算 型 错误 ;如 果 由 于 程序 中 某 处 缺少 判定 谓词 而 引起 路 径 执行 错误 , 称 为 丢失 路 径 错 
误 。 域 测试 主要 是 针对 域 错 误 进 行 的 测试 。 

域 测试 的 域 是 指 程序 的 输入 空间 , 域 测试 方法 基于 对 输入 空间 的 分 析 。 程 序 的 输入 空 
间或 称 域 ,可 分 为 不 同 的 子 空间 ,每 一 个 子 空间 对 应 于 不 同 的 计算 ,而 子 空间 的 划分 是 由 程 
序 中 分 支 语 句 的 谓词 决定 的 。 输 入 空间 的 一 个 元 素 ,根据 其 自身 特征 经 过 程序 中 某 些 特定 
语句 后 输出 或 结束 (当然 也 可 能 存在 无 限 循 环 而 无 出 口 的 情况 ) ,形成 一 条 执行 路 径 。 域 测 
试 正 是 在 分 析 输 入 域 的 基础 上 选择 合适 的 测试 点 后 所 开展 的 测试 ,基本 步骤 包括 : 

(1) 根据 各 个 分 支 谓 词 ,给 出 子 域 分 割 图 ; 

(2) 在 每 个 子 域 的 边界 处 选取 测试 点 ; 

(3) 在 子 域内 选取 一 些 测试 点 ; 

(4) 针对 上 述 测试 点 进行 测试 。 

域 测试 有 两 个 主要 缺点 : 一 是 为 进行 域 测试 ,对 程序 提出 的 限制 过 多 ;二 是 当 程序 存在 
很 多 路 径 时 ,所 需 的 测试 点 过 多 。 


4. 符号 测试 

符号 测试 可 看 作 是 对 传统 测试 的 一 个 扩充 。 符 号 测试 的 基本 思想 是 不 仅 允许 程序 的 输 
入 是 具体 的 数值 数据 ,而 且 还 可 以 是 符号 值 。 这 里 的 符号 值 可 以 是 基本 符号 变量 值 ,也 可 以 
是 这 些 符号 变量 值 的 一 个 表达 式 。 从 而 在 执行 程序 过 程 中 ,以 符号 计算 代替 了 传统 测试 中 
的 数值 计算 ,得 到 的 结果 是 符号 公式 或 者 符号 谓词 。 

符号 测试 可 看 作 是 程序 测试 和 程序 验证 的 一 个 折 中 方法 。 一 方面 , 它 沿用 了 传统 的 程 
序 测试 方法 ,通过 运行 被 测 程序 来 验证 其 正确 性 ; 另 一 方面 ,由 于 一 次 符合 测试 的 输入 代表 
了 一 类 传统 测试 的 输入 :实际 上 是 证 明了 程序 接收 此 类 输入 后 的 运行 处 理 和 输出 结果 。 符 
号 测试 的 关键 是 开发 出 比 传统 的 编译 器 功能 更 强 ,能 够 处 理 符 号 运算 的 编译 器 和 解释 器 。 

目前 符合 测试 还 存在 一 些 未 得 到 圆满 解决 的 问题 ,主要 是 以 下 3 点 。 

(1) 分 支 问 题 。 当 采用 符号 执行 方法 进行 到 某 一 分 支点 时 ,由 于 分 支 谓词 是 符号 表达 
式 ,通常 无 法 确定 谓词 的 取 值 ,也 就 不 能 决定 分 支 的 走向 ,需要 测试 人 员 进 行 干预 或 是 执行 
树 的 方法 进行 下 去 。 另 外 ,如 果 程 序 中 有 循环 ,而 循环 次 数 又 决定 于 输入 变量 , 那 就 无 法 确 
定 循环 的 次 数 。 

(2) 二 义 性 问题 。 数 据 项 的 符号 值 可 能 是 二 义 性 的 .这 种 情况 通常 出 现在 带 有 数组 的 
程序 中 。 比 如 下 面 的 程序 段 : 


x(i)=2+a; 
x()=07 
b=x (i); 


如 果 i 二 j, 则 5 二 0; 否 则 5 二 2 十 a。 但 如 果 使 用 符号 值 运算 .无 法 知道 i 是否 等 于 j, 从 
而 存在 二 义 性 。 

(3) 大 程序 问题 。 符 号 测试 总 是 要 处 理 符 号 表达 式 , 随 着 符号 执行 的 继续 ,一些 变量 的 
符号 表达 式 会 越 来 越 庞 大 。 特 别 是 当 符号 执行 树 很 大 ,分 支点 很 多 ,路 径 条 件 本 身 变 成 一 个 
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非常 长 的 合 取 式 。 如 果 找 不 到 化 简 的 方法 ,将 导致 符号 测试 运行 时 间 和 空间 的 大 幅 增长 ,其 
至 带 来 难以 克服 的 困难 。 


5. 白 盒 测试 技术 分 析 

白 盒 测试 技术 是 软件 测试 的 主要 技术 之 一 。 白 盒 测试 又 叫 结构 测试 或 逻辑 测试 ,利用 
程序 设计 的 内 部 逻辑 和 控制 结构 生成 测试 用 例 ,进行 软件 测试 。 白 盒 测 试 的 优点 是 能 够 帮 
助 软件 测试 人 员 提 高 对 程序 代码 的 覆盖 率 , 从 而 发 现代 码 中 隐藏 的 问题 ,提高 代码 的 质量 。 

白 盒 测 试 方法 又 可 分 为 静态 白 盒 测 试 方法 和 动态 白 盒 测试 方法 。 静 态 测试 侧重 于 源 代 
码 检查 和 优化 ,基本 思想 是 不 设计 测试 用 例 , 而 是 通过 直接 查看 源 代码 或 模拟 执行 代码 的 方 
式 开 展 测试 ,目标 是 直接 定位 代码 中 的 缺陷 ,提出 结构 设计 优化 的 意见 和 有 关 测 试 重点 的 建 
议 。 动 态 测 试 侧重 于 关键 程序 结构 的 测试 ,基本 思想 是 通过 对 导致 程序 结构 复杂 度 的 判定 
表达 式 .执行 路 径 和 循环 结构 等 设计 测试 用 例 的 方式 开展 测试 ,目标 是 达到 某 种 程度 的 覆 
盖 , 从 测试 完备 性 和 无 元 余 性 的 角度 给 予 信心 。 

对 使 用 各 种 白 盒 测试 方法 的 总 体 策略 ,有 如 下 7 点 建议 。 

(1) 优先 进行 静态 白 盒 测试 ,特别 是 重要 、 核 心 的 功能 模块 的 相关 代码 ,应 定期 组 织 严 
格 评审 ,并 不 断 更 新 缺陷 检查 表 等 测试 标准 或 规范 文档 。 

(2) 尽量 使 用 测试 工具 完成 代码 结构 和 质量 的 相关 分 析 和 评估 ,对 代码 进行 设计 评审 
和 优化 。 

(3) 采取 先 静态 后 动态 的 组 合 方式 , 即 先 利用 工具 或 者 人 工 手段 进行 静态 结构 分 析 、 代 
码 审 查 或 代码 走 查 . 青 进行 基本 路 径 测试 控制 结构 测试 等 覆盖 率 测试 。 

(4) 通过 代码 审查 和 动态 测试 的 方式 ,对 静态 分 析 的 结果 做 进一步 确认 ,可 使 测试 工作 
更 加 有 效 。 

(5) 覆盖 率 测试 是 白 盒 测试 的 重点 ,要 选择 合理 的 覆盖 率 指 标 , 一 般 可 先 使 用 基 路 径 测 
试 方法 ,然后 对 重点 单元 或 模块 ' 使 用 多 种 覆盖 率 标准 衡量 对 代码 的 覆盖 率 。 

(6) 设计 测试 用 例 时 ,注意 结合 边界 抽取 测试 数据 ,包括 判定 表达 式 的 边界 .循环 次 数 
的 边界 ,变量 取 值 范围 的 边界 等 。 

(7) 在 不 同 测试 阶段 .测试 的 侧重 点 有 所 不 同 : 在 单元 测试 阶段 ,以 代码 审查 、 浊 辑 覆 
盖 为 主 :在 集成 测试 阶段 ,需要 增加 静态 分 析 、` 静 态 质量 度量 ;在 系统 测试 阶段 ,应 基于 黑 盒 
测试 的 结果 和 需要 ,采取 相应 的 白 盒 测试 方法 ,可 借鉴 基本 路 径 测试 的 思想 设计 高 层 测试 用 
例 ,提高 测试 的 覆盖 性 ,降低 测试 的 宛 余 。 


3.2 黑 盒 测 试 


3.2.1 概述 


黑 盒 测试 (black-box testing) 也 称 功能 测试 .数据 驱动 测试 或 基于 规格 说 明 的 测试 。 根 
据 GB/T 11457 一 2006 ,功能 测试 (functional testing) 是 “忽略 系统 或 部 件 的 内 部 机 制 只 集中 
于 响应 所 选择 的 输入 和 执行 条 件 的 输出 的 一 种 测试 ”。 黑 盒 测试 把 被 测 软件 看 作 是 一 个 打 
不 开 的 黑 盒 子 , 如 图 3-11 所 示 .测试 人 员 关 注 软 件 行为 和 功能 ,不 关心 软件 内 部 结构 ,根据 
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软件 规格 说 明 来 发 现 程序 中 的 错误 。 黑 盒 测试 是 从 程序 使 用 者 或 用 户 的 角度 进行 的 测试 。 


输入 输出 


3-11 黑 盒 测试 技术 示意 图 


黑 盒 测 试 主要 发 现 以 下 类 型 的 错误 : 

(1) 基于 规格 说 明 的 功能 错误 ,包括 不 正确 的 和 遗漏 的 功能 ; 

(2) 基于 规格 说 明 的 软件 或 系统 行为 错误 ; 

(3) 基于 规格 说 明 的 性 能 错误 ; 

(4) 面向 用 户 的 使 用 错误 ; 

(5) 黑 盒 接口 错误 ,包括 接口 数据 结构 或 外 部 访问 错误 等 ; 

(6) 初始 化 或 终止 错误 。 

黑 盒 测 试 在 设计 测试 用 例 时 只 对 输入 和 输出 进行 考虑 。 由 于 对 所 有 可 能 的 输入 进行 穷 
尽 测试 是 不 现实 的 ,因此 测试 人 员 的 目标 是 在 可 用 资源 约束 下 生成 测试 用 例 , 尽 可 能 多 地 发 
现 软件 存在 的 问题 。 常 用 的 黑 盒 测 试 方法 包括 等 价 类 划分 .边界 值 分 析 、 错 误 推 测 .基于 场 
景 测试 `. 因 果 图 与 决策 表 法 等 ,将 在 后 面 章节 逐一 介绍 。 

为 了 方便 ,将 继续 结合 前 面 白 盒 测试 所 用 的 NextDate 函数 进行 介绍 ,代码 不 青 重复 列 
片 。NextDate 函数 在 这 es 可 看 作 是 一 个 小 软件 ,其 功能 是 根据 输入 的 日 期 (年 .月 、 日 ) 计 算 
并 输出 后 一 天 的 日 期 。 这 里 仍然 假设 NextDate 函数 接收 的 输入 值 均 为 合法 值 ,对 输入 值 
是 否 合法 的 判断 在 其 他 函数 中 完成 。 








3.2.2 等 价 类 划分 


1. 概念 定义 

等 价 类 划分 法 是 一 种 典型 的 黑 盒 测试 方法 。 软 件 测试 的 基本 原则 之 一 就 是 不 可 能 做 到 
穷尽 测试 ,为 了 满足 测试 的 完备 性 和 无 完 余 性 的 目标 ,人 们 首先 提出 了 等 价 类 划分 法 。 

等 价 类 划分 法 就 是 通过 等 价 划分 的 方式 将 数据 分 类 ,然后 从 每 个 类 别 中 抽取 典型 数据 
实施 测试 。 以 被 测 软件 的 输入 域 为 例 , 若 要 满足 测试 用 例 对 整个 有 效 输入 域 和 无 效 输入 域 
的 完全 覆盖 .并且 无 元 余 , 可 在 理论 上 找到 一 种 划分 方式 .将 该 输入 域 划 分 为 一 些 子 集 ( 称 为 
等 价 类 ) ,满足 : 

(1) 每 个 子 集 内 所 有 数据 等 价 . 即 被 测 软 件 对 该 子 集中 每 个 数据 的 处 理 方式 相同 ( 保 
覆盖 ); 

(2) 各 子 集 互 不 相交 . 即 输 入 域 中 的 某 个 数据 唯一 隶属 于 某 个 子 集 (保证 无 元 余 ); 

(3) 所 有 子 集 的 并 集 是 整个 输入 域 ( 保 证 完备 ) 。 

由 此 , 若 从 每 个 子 集中 随便 抽取 一 个 ( 且 仅 一 个 ) 数 据 , 所 构成 的 数据 集合 可 满足 测试 的 完备 
性 和 无 元 余 性 ,从 而 将 难以 穷 举 的 输入 域 数据 减少 为 少量 典型 数据 的 集合 .降低 测试 工作 量 。 

实际 上 .为 了 避免 等 价 类 测试 的 漏洞 .不仅 需 要 对 被 测 软件 的 输入 域 进行 等 价 类 划分 ， 
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还 常常 需要 对 输出 域 进行 等 价 类 划分 。 


2. 原理 分 析 

所 谓 等 价 类 是 指 输入 域 ( 和 (或 ) 输 出 域 ) 的 一 组 互 不 相交 的 子 集 , 该 组 子 集 的 并 集 是 整 
个 输入 域 , 因 此 等 价 类 划分 法 设计 的 测试 用 例 具备 完备 性 和 无 元 余 性 。 由 于 等 价 类 是 由 等 
价 关系 决定 的 .等 价 类 中 的 元 素 具 有 一 些 共同 特点 。 如 果 用 等 价 类 中 的 一 个 元 素 作 为 测试 
数据 不 能 发 现 程序 缺陷 ,那么 使 用 集合 中 的 其 他 元 素 也 不 能 发 现 该 缺陷 , 即 对 于 揭露 程序 缺 
陷 来 说 ,等 价 类 中 的 每 个 元 素 是 等 价 的 。 应 该 将 测试 用 例 分 布 到 各 个 等 价 类 中 。 

软件 不 能 只 接受 有 效 合理 的 数据 ,还 要 能 处 理 无 效 或 非法 的 数据 ,这 样 才能 具有 较 高 的 
可 靠 性 。 因 此 ,在 等 价 类 划分 时 ,应 区 分 两 种 不 同 的 情况 。 

(1) 有 效 等 价 类 , 即 符合 规格 说 明 的 ,有 意义 的 、 合 理 的 数据 构成 的 集合 。 利 用 有 效 等 
价 类 ,能 够 检验 程序 是 否 实现 了 规格 说 明 中 所 规定 的 要 求 。 在 具体 问题 中 ,有 效 等 价 类 可 以 
是 一 个 ,但 一 般 是 多 个 。 

(2) 无 效 等 价 类 , 即 不 符合 规格 说 明 的 ,不 合理 或 非法 的 数据 构成 的 集合 。 利 用 无 效 等 
价 类 ,能 够 检查 软件 功能 和 性 能 的 实现 是 否 有 不 符合 规格 说 明 的 地 方 。 在 具体 问题 中 ,无 效 
等 价 类 可 以 是 一 个 ,也 可 能 有 多 个 。 


3. 测试 设计 

等 价 类 划分 可 基于 一 种 非常 简便 的 思路 : 首先 ,将 某 个 输入 条 件 的 所 有 可 能 取 值 划分 为 
一 个 有 效 等 价 类 ,其 余 取 值 划分 为 一 个 无 效 等 价 类 ;然后 ,针对 有 效 等 价 类 ,通过 不 断 施 加 规 
则 ,将 满足 规则 和 不 满足 规则 的 数据 划分 为 不 同 的 有 效 等 价 类 ,不 断 重复 ,直至 无 法 继续 划分 
为 止 , 最 后 得 到 的 每 个 有 效 等 价 类 代表 了 被 测 程序 的 一 种 特殊 处 理 方式 ;最 后 ,对 于 无 效 等 价 
类 ,也 采取 相同 方式 进行 划分 ,不 过 一 般 没 有 必要 对 无 效 等 价 类 进行 过 多 的 等 价 划分 。 

就 某 个 输入 条 件 而 言 .一般 地 ,等 价 类 划分 可 参照 如 下 原则 : 

(1) 车 输入 条 件 规定 了 取 值 范围 . 且 取 值 范 围 上 限 、 下 限 之 间 的 数据 是 有 意义 的 数据 ， 
则 取 值 范围 内 的 数据 构成 一 个 等 价 类 ,小 于 下 限 或 大 于 上 限 的 所 有 数据 分 别 构成 两 个 无 效 
等 价 类 ; 

(2) 若 输 入 条 件 规定 了 “必须 如 何 ” 的 条 件 . 在 满足 必须 条 件 的 数据 构成 一 个 有 效 等 级 
类 ,其 他 数据 构成 一 个 无 效 等 价 类 ; 

(3) 若 输入 条 件 是 一 个 布尔 量 , 则 取 真 值 的 数据 构成 一 个 有 效 等 价 类 , 取 假 值 的 数据 构 
成 一 个 无 效 等 价 类 ; 

(4) 车 输入 条 件 是 一 个 枚 举 量 , 即 规定 了 输入 数据 的 一 组 合法 值 .并 且 程 序 要 对 每 个 输 
入 值 分 别 进行 处 理 , 则 可 为 每 一 个 输入 值 划分 一 个 有 效 等 价 类 .此 外 还 要 对 这 组 合法 值 之 外 
的 值 确立 一 个 无 效 等 价 类 。 


4. 实例 演示 

以 NextDate 为 例 。 假 设 允 许 输 入 的 最 小 日 期 为 1900 年 1 月 1 日 .最 大 日 期 为 2099 年 
12 月 31 日 ,为 了 叙述 方便 ,分 别 记 为 MinDate 和 MaxDate。 

首先 ,根据 有 效 输入 域 的 最 小 值 和 最 大 值得 到 : 

有 效 等 价 类 : Dt 一 {日 期 | 从 MinDate 开始 到 MaxDate 截止 的 所 有 日 期 }; 

无 效 等 价 类 : NDt = 三 { 日 期 | MinDate 之 前 的 所 有 日 期 }, NDt2 一 {日 期 | MaxDate 之 后 
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的 所 有 日 期 }。 
然后 ,通过 不 断 施加 规则 ,将 有 效 等 价 类 不 断 划分 下 去 ,如 图 3-12 所 示 。 











D21: 

Dt_22: 

Dt_222: 从 MinDate 开 始 到 MaxDate 截 止 的 每 年 的 |、3、5、7、8、10 月 的 最 后 一 天 } 
Dt 223 从 MinDate 开 始 到 MaxDate 截 止 的 每 年 的 2 月 最 后 一 天 } 


有 月 末日 期 } Wy 让 a 
从 MinDate 开 始 到 MaxDate 蕉 止 的 每 年 1 月 到 11 月 的 最 后 一 天 } 


{ 日 期 | 
{ 日 期 | 
但 期 | 
{日 期 | 
{日 期 | 
Dt_221: 人 | 从 MinDate 开 始 到 MaxDate 截 止 的 每 年 的 、6、9、11 月 的 最 后 一 天 } 

{ 

{日期 | 
{ 日 期 | 
{ 草 期 | 


从 MinDate 开 始 到 MaxDate 截 止 的 头 年 的 2 月 29 号 } 
从 MinDate 开 始 到 MaxDate 截 止 的 平年 的 2 月 28 号 } 


图 3-12 ”NextDate 的 有 效 等 价 类 划分 示意 图 


D2232: 





最 终 将 有 效 输入 划分 为 Dt_1、Dt_21、Dt_221、Dt_222、Dt_2231、Dt_2232 六 个 等 价 类 ， 
对 应 的 测试 用 例如 表 3-9 所 示 。 


表 3-9 NextDate 的 有 效 等 价 类 测试 用 例 

s 
NextDate-EP-01 普通 日 期 Dt_1 
NextDateEP-02 | 19811231 | 1982-11 | 年 未 日 期 Dt_21 
NextDate-EP-03 月 末 (30 天 )Dt_221 
NextDate-EP-04 2010-10-31 2010-11-1 月 未 (31 天 )Dt_222 
NextDate-EP-05 头 年 2 月 末 Dt_2231 
NextDate-EP-06 非 韶 年 2 月 末 Dt_2232 


5. 方法 总 结 

等 价 类 划分 法 是 一 种 有 效 地 测试 方法 .能 够 将 庞大 的 输入 域 化 简 为 小 规模 的 有 限 集合 
且 理 论 上 讲 化 简 前 后 的 两 个 集合 对 测试 而 言 是 等 效 的 。 在 有 明确 的 条 件 和 限制 的 情况 下 ， 
利用 等 价 类 划分 法 可 设计 出 完备 的 测试 用 例 集 ,减少 不 必要 的 测试 用 例 。 

等 价 类 划分 法 的 优点 是 考虑 了 输入 域 的 各 类 情况 ,避免 了 因 言 目 或 随机 选取 测试 
数据 而 造成 的 覆盖 不 完整 性 或 不 稳定 性 。 尽 管 等 价 类 划分 法 比 随 机 选取 测试 用 例 要 
优越 ,但 仍 存在 不 足 。 比 如 :等 价 类 划分 法 往往 只 考虑 独立 条 件 的 输入 输出 ,而 忽略 多 








软件 测试 实用 方法 与 技术 


个 条 件 之 间 的 关联 关系 ;或 者 说 ,如 果 考 虑 了 多 个 条 件 之 间 的 关联 关系 ,往往 会 产生 很 
多 的 测试 用 例 ,造成 非常 高 的 测试 代价 。 另 外 ,等 价 类 划分 法 还 可 能 忽略 掉 特 定 类 型 
的 高 效 测试 用 例 ,比如 某 些 边界 值 。 边 界 值 分 析 法 和 因果 图 法 可 弥补 等 价 类 划分 法 在 
这 些 方面 的 不 足 。 


3.2.3 边界 值 分 析 


1. 概念 定义 

边界 值 分 析 法 是 指 在 被 测 对 象 的 边界 及 边界 附近 设计 测试 用 例 的 方法 。 测 试 实践 发 
现 ,大 量 缺 陷 发 生 在 被 测 对 象 的 输入 域 或 输出 域 的 边界 上 ,而 不 是 在 内 部 ;如 果 针 对 边界 附 
近 加 以 重点 验证 ,常常 得 到 良好 的 测试 效果 。 因 此 ,边界 值 分 析 法 不 是 选择 等 价 类 的 任意 元 
素 , 而 是 主要 针对 各 种 边界 情况 设计 测试 用 例 。 


2. 原理 分 析 

边界 值 分 析 法 是 对 从 等 价 类 划分 法 导出 的 测试 用 例 的 一 个 非常 合理 的 补充 。 程 序 错误 
经 常 出 现在 等 价 类 的 边界 上 ,而 出 现 这 种 情况 的 原因 经 常 是 没有 明确 定义 边界 值 ,或 者 编程 
人 员 对 边界 产生 误解 。 利 用 边界 值 分 析 进 行 的 测试 往往 能 够 有 效 地 发 现 错误 。 

边界 值 分 析 法 符合 人 们 的 一 个 基本 假设 : 如 果 软 件 在 能 力 达 到 极限 的 时 候 能 够 运行 ， 
那么 它 在 正常 情况 下 就 不 会 有 什么 问题 。 


3. 测试 设计 

对 于 某 个 输入 条 件 ,边界 值 分 析 可 参考 以 下 原则 : 

(1) 车 输入 条 件 规定 了 取 值 范围 . 则 以 该 范围 为 边界 ; 

(2) 若 输 入 条 件 规定 了 值 的 个 数 . 则 以 值 的 个 数 为 边界 ; 

(3) 车 输入 域 是 有 序 集合 (比如 有 序 表 、 顺 序 文件 等 ), 则 选取 集合 中 特定 次 序 的 数据 作 
为 边界 ,如 第 一 个 或 最 后 一 个 数据 等 。 

实际 上 ,针对 某 个 输入 条 件 确定 边界 点 时 ,可 基于 如 下 的 思路 。 

(1) 在 需求 描述 中 寻找 最 大 极限 边界 .比如 .最 高 /最 低 、 最 多 /最 少 、 最 前 /最 后 等 。 对 
于 凡是 可 用 数值 来 描述 的 输入 条 件 而 言 :无论 在 需求 规格 说 明 中 是 否 明确 指出 其 边界 ,其 极 
限 边界 条 件 是 一 定 存在 的 ,因为 在 程序 实现 时 ,该 输入 条 件 一 定 需要 用 某 个 数据 变量 来 表 
示 ,而 数据 变量 对 应 的 某 个 数据 类 型 是 有 取 值 范 围 的 。 当 需求 规格 说 明 中 未 明确 规定 输入 
条 件 的 边界 时 ,该 取 值 范围 就 是 其 极限 边界 。 

(2) 在 需求 描述 中 寻找 其 他 较为 明显 的 边界 ,这 些 边界 的 主要 特征 是 : 当 在 该 点 附近 
一 个 极 小 的 邻 域内 分 别 取 大 于 、 等 于 和 小 于 该 点 的 3 个 值 时 .被 测 程序 对 它们 的 处 理 是 不 完 
全 相同 的 。 换 言 之 . 某 个 输入 条 件 的 边界 不 仅 包含 最 小 值 点 和 最 大 值 点 ,还 可 能 存在 其 他 非 
极 值 性 质 的 边界 点 。 

(3) 需要 关注 在 软件 内 部 的 边界 点 , 称 为 次 边界 条 件 或 内 部 边界 条 件 。 比 如 ,2 的 乘 
方 .ASCII 字符 表 等 。 软 件 最 终 用 户 一 般 是 看 不 到 这 类 边界 的 ,寻找 这 类 边界 通常 要 求 测试 
人 员 具 有 一 定 的 编程 经 验 。 
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4. 实例 演示 
以 NextDate 为 例 ,分 别 考虑 年 .月 .日 的 边界 以 及 允许 输入 值 的 整体 边界 ,设计 边界 值 
测试 用 例如 表 3-10 所 示 。 


表 3-10 ”NextDate 的 边界 值 测试 用 例 



























































ID 输入 数据 (年 -月 -日 ) 预期 输出 (年 -月 -日 备注 
一 个 900 和 2099 
NextDate-BVT-01 1899-2-14 P90 
NextDate-BVT-02 1900-2-14 1900-2-15 
NextDate-BVT-03 1901-2-14 1901-2-15 
年 的 边界 
NextDate-BVT-04 2098-2-14 2098-2-15 
NextDate-BVT-05 2099-2-14 2099-2-15 
未“ 请 填写 一 个 在 19 2099 
NextDate-BVT-06 2100-2-14 提示 “请 填写 一 个 在 1900 和 2099 
之 间 的 整数 
提示 “请 填写 一 个 在 1 和 12 之 间 
NextDate-BVT-07 2015-0-14 i 
的 整数 
NextDate-BVT-08 2015-1-14 2015-1-15 
NextDate-BVT-09 2015-2-14 2015-2-15 
月 的 边界 
NextDate-BVT-10 2015-11-14 2015-11-15 
NextDate-BVT-11 2015-12-14 2015-12-15 
未 “请 填写 一 个 在 2 之 
NextDate-BVT-12 2015-13-14 提示 “请 填写 一 个 在 1 和 12 之 间 
的 整数 
-个 在 pa 
NextDate-BVT-13 2015-4-0 个 在 1 和 31 之 间 
NextDate-BVT-14 2015-4-1 
NextDate-BVT-15 2015-4-2 
日 的 边界 
NextDate-BVT-16 2015-4-30 2015-5-1 
NextDate-BVT-17 2015-4-31 提示 “日 期 不 存在 ” 
提示 “请 填写 一 个 在 1 和 31 之 间 
NextDate-BVT-18 2015-4-32 人 
的 整数 
示 “ 请 十 一 个 在 1900 2099 
NextDate-BVT-19 1899-12-31 | 
之 间 的 整数 
NextDate-BVT-20 1900-1-1 1900-1-2 
NextDate-BVT-21 1900-1-2 1900-1-3 
整体 边界 
NextDate-BVT-22 2099-12-30 
NextDate-BVT-23 2099-12-31 2100-1-1 
提示 “请 填写 一 个 在 1900 和 2099 
NextDate-BVT-24 2100-1-1 0 
之 间 的 整数 
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5. 方法 总 结 

边界 值 分 析 法 是 最 基本 、 最 简单 的 黑 盒 测试 方法 之 一 ,通常 作为 等 价 类 划分 法 的 补充 。 

边界 值 分 析 法 并 不 关心 某 个 输入 条 件 的 边界 点 是 被 测 对 象 可 以 接受 的 正常 值 , 还 是 不 
能 接受 的 错误 值 , 而 只 关心 该 值 是 否 是 系统 处 理 的 边界 。 因 此 ,在 分 析 边 界 点 和 测试 数据 
时 ,不 需要 特别 考虑 某 个 取 值 的 有 效 性 ,只 需 在 设计 测试 用 例 时 针对 有 效 和 无 效 输入 数据 ， 
分 别 设计 其 预期 输出 结果 即 可 。 

边界 值 分 析 法 不 仅 可 从 问题 的 输入 域 寻找 边界 ,还 可 以 从 问题 的 输出 域 寻 找 边界 ,特别 
是 在 输入 域 与 输出 域 完 全 不 相似 的 条 件 下 ,针对 输出 域 的 边界 值 测 试 尤 其 重要 。 从 输出 域 
的 边界 设计 测试 用 例 与 从 输入 域 的 边界 设计 测试 用 例 的 原则 一 致 ,但 仍 存在 一 些 不 同 之 处 ， 
主要 包括 : 如 何 选择 合适 的 输出 域 来 寻找 边界 点 ;如 何 限定 边界 点 附近 邻 域 的 大 小 ;针对 边 
界 值 附近 邻 域内 选中 的 测试 数据 ,能 够 顺利 确定 对 应 的 测试 用 例 等 。 


3.2.4 因果 图 与 决策 表 法 


1. 概念 定义 

因果 图 和 决策 表 法 是 一 种 黑 盒 测 试 方法 ,从 分 析 软 件 需 求 规格 说 明 开 始 ,首先 通过 因果 
图 得 到 因果 列表 ,然后 基于 因果 列表 建立 决策 表 , 最 后 基于 决策 表 生 成 测试 用 例 。 

因果 图 是 一 种 形式 语言 ,相当 于 一 种 数字 电路 ,一 个 组 合 的 多 辑 网 络 , 但 没有 使 用 标准 
的 电子 学 符号 ,而 是 使 用 了 简化 的 符号 。 因 果 图 法 是 一 种 可 以 辅助 测试 人 员 明确 测试 对 象 ， 
确定 测试 依据 的 有 力 手段 ,很 好 地 弥补 了 等 价 类 划分 和 边界 值 分 析 中 未 对 输入 条 件 的 组 合 
进行 分 析 的 缺点 。 因 果 图 的 基本 符号 如 图 3-13 所 示 ,C 表示 原因 ,E 表示 结果 ,各 连接 点 表 
示 状 态 , 取 值 *0" 表 示 状 态 不 出 现 , 取 值 *1” 表 示 状 态 出 现 。 


CD CD 
人 -一 四 2 
(2) (C3) 


(a) 便 等 (b) 非 (9D) 或 (d) 与 
图 3-13 ”因果 图 的 基本 符号 


因果 图 中 原因 与 结果 之 间 的 关系 包括 如 下 4 种 。 

(1) 恒 等 。 表 示 原 因 与 结果 之 间 一 对 一 的 关系 ,车 原因 出 现 , 则 结果 出 现 ; 若 原因 不 出 
现 , 则 结果 不 出 现 。 

(2) 非 。 表 示 原 因 与 结果 之 间 的 一 种 否定 关系 ,车 原因 出 现 , 则 结果 不 出 现 ; 若 原 因 不 
出 现 , 则 结果 出 现 。 

(3) 或 。 表示 若 几 个 原 有 一 个 出 现 , 则 结果 出 现 ;否则 ,结果 不 出 现 。 

(4) 与 。 表 示 若 几 个 原 出 现 . 则 结果 出 现 ; 否 则 ,结果 不 出 现 。 

另外 ,为 了 表示 原因 与 原因 之 间 的 约束 条件 ,定义 约束 符号 如 图 3-14 所 示 。 共 有 5 种 
约束 ,其 中 ,“E( 互 斥 )" 表 示 两 个 中 最 多 有 一 个 成 立 ;“I( 包 含 )” 表 示 至 少 有 一 个 必须 成 立 ; 
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“9O( 唯 一 ) "表示 有 且 仅 有 一 个 成 立 ;"R( 要 求 )" 表 示 当 Cl 出 现时 C2 必然 出 现 , 不 可 能 C1 
出 现 且 C2 不 出 现 ;“M( 屏 项 )" 表 示 当 Cl 为 *1” 时 .C2 必须 为 “0”, 而 当 C1 为 “0” 时 ,C2 的 取 
值 不 定 。 





©) (©) 
E I O 
© © 
(a)E( 互 斥 ) (b)1 (包含) (0) O (唯一 ) (d) R (要 求 ) (e) M (屏蔽 ) 


图 3-14 因果 图 的 约束 符号 


因果 图 必须 转化 成 决策 表 , 从 决策 表 才 可 以 直接 得 到 测试 用 例 。 决 策 表 由 两 部 分 组 成 ， 
上 半 部 分 是 输入 区 ,下 半 部 分 是 输出 区 , 表 中 每 一 行 是 一 个 输入 条 件 或 预期 输出 的 取 值 ,每 
一 列 构成 一 个 测试 用 例 (各 条 件 的 组 合 以 及 针对 这 一 输入 组 合 的 期 望 输出 结果 )。 典 型 的 决 
策 表 结构 示例 如 表 3-11 所 示 。 


表 3-11 决策 表 的 结构 


B2 B2 B3 B3 Bl Bl B2 B2 B3 


输入 条 件 B Bl B3 
输入 条 件 C 的 别 《2 Ca C2 C2 
Ee [1“| | 


2. 原理 分 析 

在 等 价 类 划分 和 边界 值 分 析 方 法 中 ,对 输入 条 件 的 考虑 一 般 假设 各 条 件 之 间 是 独立 的 ， 
并 未 重视 各 输入 条 件 的 关联 , 即 输入 条 件 的 可 能 组 合 。 事 实 上 , 当 输入 条 件 存在 可 能 的 组 合 
时 ,对 这 些 组 合 加 以 考虑 并 检验 在 组 合 情 况 下 程序 是 否 能 实现 预期 的 功能 是 非常 重要 和 必 
要 的 。 要 检查 输入 条 件 的 组 合 不 是 一 件 容易 的 事情 .即使 把 所 有 输入 条 件 划分 成 等 价 类 , 它 
们 之 间 的 组 合 情 况 也 非常 多 ,因此 需要 一 种 适合 于 描述 多 种 条 件 组 合 及 其 期 望 结 果 的 测试 
用 例 设 计 方 法 。 

因果 图 方法 是 一 种 根据 条 件 的 组 合 而 生成 测试 用 例 的 方法 , 它 将 规格 说 明 转 换 为 一 个 
布尔 逻辑 网 络 , 可 使 得 测试 人 员 从 不 同 的 视角 更 细致 .更 深入 地 来 审视 规格 说 明 。 事 实 上 ， 
建立 因果 图 是 一 种 暴露 规格 说 明 中 模糊 和 不 完整 之 处 的 好 办 法 。 

决策 表 由 因果 图 产生 ,决策 表 的 每 一 列 都 清楚 地 表明 各 输入 条 件 及 其 取 值 的 依赖 关系 ， 
以 及 由 这 些 输入 组 合 得 到 的 相应 预期 输出 结果 。 决 策 表 定义 了 巡 辑 测试 用 例 , 为 了 执行 这 
些 测试 用 例 ,必须 输入 具体 的 数据 值 并 且 标 识 前 置 条 件 和 后 置 条 件 。 

可 以 定义 基于 决策 表 的 测试 完成 准则 。 最 基本 的 要 求 是 至 少 用 一 个 测试 用 例 来 覆盖 决 
策 表 中 的 每 一 列 ,这 样 就 能 验证 所 有 关心 的 输入 条 件 组 合 及 其 相应 的 输出 结果 。 不 过 需要 
指出 的 是 ,在 把 每 个 组 合 设计 成 测试 用 例 时 ,由 于 条 件 可 能 会 相互 影响 甚至 相互 排斥 ,因此 
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We 不 是 所 有 的 组 合 都 是 有 效 的 。 
决策 表 法 的 实质 是 对 个 体 输 入 域 的 有 效 等 价 类 测试 的 扩充 ,体现 在 如 下 方面 : 


(1) 在 输入 区 列 出 的 所 有 取 值 并 非 具体 的 数据 ,而 是 每 个 输入 条 件 的 有 效 等 价 类 ,实际 


上 是 全 部 输入 条 件 的 强 组 合 方式 的 等 价 类 测试 ,因此 只 要 有 效 等 价 类 的 划分 不 存在 漏洞 , 则 
决策 表 可 以 保证 有 效 输入 域 上 完备 的 测试 ; 


(2) 决策 表 对 输入 条 件 仅 考 虑 有 效 等 价 类 ,不 考虑 无 效 等 价 类 ,实际 上 针对 无 效 等 价 类 


的 测试 一 般 不 存在 宛 余 . 不 需要 考虑 元 余 的 消除 ; 


(3) 在 决策 表 的 输出 区 ,并 不 涉及 输出 域 的 等 价 类 划分 。 


3. 测试 设计 
使 用 因果 图 和 决策 表 法 生成 测试 用 例 有 如 下 6 个 基本 步骤 。 
(1) 分 析 规 格 说 明 , 找 出 哪些 是 原因 ,哪些 是 结果 ,并 对 每 个 原因 和 结果 进行 唯一 标识 。 


所 谓 原 因 , 是 指 进行 等 价 类 划分 后 的 输入 条 件 ;所 谓 结果 ,是 指 输出 条 件 。 


现 。 


(2) 分 析 规格 说 明 , 找 出 原因 和 结果 之 间 、 原 因 和 原因 之 间 的 对 应 或 约束 关系 。 

(3) 绘制 因果 图 。 

(4) 由 于 语法 或 环境 限制 .有 些 原因 和 原因 之 间 、 原 因 和 结果 之 间 的 组 合 情 况 不 可 能 出 
为 表明 这 些 特 殊 情况 ,在 因果 图 上 标记 约束 或 限制 条 件 。 

(5) 把 因果 图 转换 成 决策 表 。 又 可 分 为 如 下 步骤 : 遍历 每 个 结果 进行 逐一 分 析 ; 


@ 在 因果 图 中 查找 能 够 得 到 这 个 结果 的 原因 组 合 ,以 及 不 能 产生 这 个 结果 的 原因 组 合 ; 
@ 在 决策 表 中 ,为 每 一 个 原因 组 合 以 及 引起 这 个 结果 的 状态 加 一 列 ; @ 检 查 决策 表 条 目 是 
否 出 现 宛 余 ,如 果 有 , 则 删除 元 余 的 条 目 。 


(6) 依据 判定 表 中 的 每 一 列 设计 测 试用 例 。 


4. 实例 演示 
对 于 NextDate 程序 .分别 考虑 年 .月 .日 三 个 输入 的 等 价 类 划分 ,获得 原因 共 11 个 ,以 


及 结果 6 个 。 原 因 分 别 是 : 


M1 王 (月 | 有 30 天 的 月 份 , 即 4、6、9、11); 
M2 二 {月 | 有 31 天 的 月 份 .但 12 月 除外 , 即 1、3、5、7、8、10); 


{ 

M3 一 { 月 |12 月 }; 

M4 一 (月 |2 月 ); 

D1 一 (日 |1 委 日 和 27)}; 
D2 一 (日 128}; 

D3 一 (日 129}5 

D4 一 (日 130}; 
D5 一 (日 131} 


Y1 一 { 年 | 阔 年 , 且 1900 委 年 过 2099}; 
Y2= 王 (年 | 非 阔 年 , 且 1900 过 年 人 2099)。 
结果 分 别 是 : 

El 二 {日 期 加 1); 

E2 二 {日 期 为 1( 重 管 )); 
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E3 一 { 月 份 加 1)}; 

E4 一 { 月 份 为 1( 重 置 )}; 

E5 一 { 年 份 加 1}; 

E6 二 {不 可 能 情况 }。 

基于 上 面 分 析 , 可 绘制 因果 图 并 基于 因果 图 ,得 到 NextDate 的 决策 表 如 表 3-12 所 示 。 


表 3-12 NextDate 的 决策 表 


测试 用 例 
Cl: 月 份 在 哪 ? 








C2: 日 期 在 哪 ? 
C3: 年 份 在 哪 ? 








El1: 日 期 加 1 
E2: 日 期 为 1 








E3: 月 份 加 1 
E4: 月 份 为 1 
年 份 加 1 





E6: 不 可 能 情况 
测试 用 例 
Cl: 月 份 在 哪 ? 
C2: 日 期 在 哪 ? 
C3: 年 份 在 哪 ? 
El: 日 期 加 1 
E2: 日 期 为 1 
E3: 月 份 加 1 
E4: 月 份 为 1 
E5: 年 份 加 1 
E6: 不 可 能 情况 


M4 M4 M4 M4 


D3 D3 D4 D5 
































V ~ V 





在 表 3-12 中 ,共有 22 条 规则 , 仍 可 以 进行 简化 ,比如 规则 1、2、3 分 别 涉及 M1 情况 下 
的 日 期 D1、D2、D3 ,输出 结果 一 致 ,是 可 以 合并 的 。 经 过 化 简 后 的 决策 表 如 表 3-13 所 示 。 
相应 的 测试 用 例如 表 3-14 所 示 。 


表 3-13 NextDate 的 简化 决策 表 







测试 用 例 
Cl: 月 份 在 哪 ? MI 
C2: 日 期 在 哪 ? | D1 一 D3 





M4 | M4 | M4 M4 





D2 | D2 | D3 | D3 | D4~D5 
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续 表 
测试 用 例 1 2 jo | 13 
C3: 年 份 在 哪 ? ¥e| 
El: 日 期 加 1 Vv 
E2: 日 期 为 1 V V | V 
E3: 月 份 加 1 V V | V 
E4: 月 份 为 1 
E5: 年 份 加 1 
E6: 不 可 能 情况 V V 
表 3-14 NextDate 的 测试 用 例 表 
ID 输入 日 期 预期 输出 备 注 
NextDate-DT-01 2015-6-2 2015-6-28 30 天 月 份 的 普通 日 期 
NextDate-DT-02 2015-6-3 2015-7-1 30 天 月 份 的 月 末 
NextDate-DT-03 2015-6-31 提示 日 期 不 存在 无 效 日 期 
NextDate-DT-04 2015-7-27 2015-7-28 31 天 月 份 的 普通 日 期 
NextDate-DT-05 2015-7-31 2015-8-1 31 天 月 份 的 月 末 
NextDate-DT-06 2015-12-27 2015-12-28 12 月 的 普通 日 期 
NextDate-DT-07 2015-12-31 2016-1-1 12 月 的 月 末 ( 年 末 ) 
NextDate-DT-08 2015-2-27 2015-2-28 非 阔 年 2 月 的 普通 日 期 
NextDate-DT-09 2016-2-28 2016-2-29 头 年 2 月 的 普通 日 期 
NextDate-DT-10 2015-2-28 2015-3-1 非 韶 年 2 月 的 月 末 
NextDate-DT-11 2016-2-29 2016-3-1 羡 年 2 月 的 月 末 
NextDate-DT-12 2015-2-29 提示 日 期 不 存在 无 效 日 期 
NextDate-DT-13 2015-2-30 提示 日 期 不 存在 无 效 日 期 











5. 方法 总 结 

因果 图 法 有 助 于 用 一 种 较 系统 的 方法 选择 出 高 效 的 测试 用 例 集合 .产生 一 组 有 效 地 测 
试用 例 , 但 通常 不 能 生成 全 部 所 需 的 测试 用 例 , 因 为 它 仍 会 受到 各 输入 条 件 的 等 价 划 分 的 限 
制 。 另 外 ,在 条 件 的 数量 和 依赖 关系 增加 时 .因果 图 和 决策 表 的 规模 将 增加 的 非常 快 ,从 而 
失去 可 读 性 。 

当 输 入 条 件 不 存在 相关 性 时 .不 需要 使 用 因果 图 和 决策 表 方 法 .因为 等 价 类 划分 方法 生 
成 的 测试 用 例 之 间 本 身 就 不 存在 元 余 。 另 外 ,决策 表 法 仅 针对 输入 域 展开 分 析 , 需 要 从 设计 
的 角度 对 输出 域 进 行 细 化 .才能 得 到 更 加 准确 的 测试 用 例 。 


3.2.5 组 合 测试 


1. 概念 定义 
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待 测 系 统 运行 时 出 现 故障 的 原因 可 能 是 由 于 某 一 个 参数 的 单独 作用 ,但 更 多 情况 下 是 
因为 多 个 参数 的 相互 作用 。 一 般 地 ,软件 系统 的 输入 数据 或 操作 、 内 外 部 事件 、 软 硬件 配置 
等 因素 都 可 能 触发 软件 故障 ,而 由 于 影响 因素 多 且 每 个 因素 的 取 值 情况 可 能 比较 复杂 ,它们 
的 相互 组 合 情 况 将 形成 一 个 数量 巨大 的 测试 用 例 空 间 ,给 软件 测试 带 来 很 大 难度 。 

组 合 测试 是 一 种 充分 考虑 各 种 因素 及 其 相互 作用 的 软件 测试 方法 ,能 够 设计 出 一 组 数 
量 较 少 但 能 满足 参数 组 合 覆 盖 要 求 的 测试 用 例 , 是 一 种 实用 的 技术 方法 。 


2. 原理 分 析 


设 一 个 待 测 系统 有 nn 个 参数 cE Di ,cs€ Ds,… ,cE D, ,Di(i 二 1,2,…,n) 为 参数 c; 的 
合理 取 值 范围 。 遍 历 所 有 这 些 值 是 不 可 能 也 是 不 必要 的 .需要 从 中 选 出 具有 典型 意义 的 离 
散 点 。 一 般 地 , 先 根据 边界 分 析 法 选择 c; 可 以 取 到 的 边界 值 ,然后 再 根据 等 价 类 划分 法 补 
充 若干 取 值 点 ,使 得 c; 的 取 值 更 具有 代表 性 。 经 过 这 样 处 理 后 ,参数 ,co，… ,cs 都 取 一 组 
离散 值 Ti ,T。,…,7T, ,其 中 T; 表示 ci 可 取 的 有 限 离散 点 集 ,并 假设 w 表示 ci 可 取 值 的 个 


数 , 即 ww 一 | 并 |。 


如 果 对 这 郊 个 参数 的 各 种 组 合 进行 完全 覆盖 测试 ,需要 w Xa XX… Xa 个 测试 用 例 ,这 
在 一 般 情况 下 是 不 可 行 的 ,所 以 转向 对 这 些 参数 的 部 分 组 合 进行 覆盖 测试 。 一 般 地 ,根据 覆 
盖 程 度 的 不 同 , 可 以 考虑 单 因素 覆盖 ,两 两 组 全 覆盖、 三 三 组 合 覆 盖 等 。 单 因素 覆盖 指 得 是 
对 每 个 参数 的 各 个 取 值 进行 覆盖 ,要 求 每 个 参数 的 各 个 取 值 都 至 少 出 现 一 次 ,至 少 需要 思 一 
maxi<i<nai 个 测试 用 例 :两 两 组 合 覆 盖 要 求 对 任意 两 个 参数 的 所 有 取 值 组 合 进行 覆盖 ,保证 
每 一 个 取 值 组 合 都 至 少 出 现 一 次 :至少 需 要 mr 二 maxi<cizj<nai Xa 个 测试 用 例 ; 三 三 组 合 覆 
盖 要 求 对 任意 三 个 参数 的 所 有 取 值 组 合 进行 覆盖 ,至 少 需要 六 一 maxn<izejzk<narXoXau 个 
测试 用 例 。 依 此 类 推 , 随 着 参数 组 合 覆 盖 要 求 的 增加 .测试 用 例 的 数量 也 呈 指 数 上 升 ,测试 
代价 越 来 越 大 ; 另 一 方面 ,如 果 某 组 测试 用 例 能 实现 对 任意 !(1 近 /反思 个 参数 的 组 合 覆 盖 ， 
则 也 能 实现 对 任意 /一 1. /一 2,….2,1 个 参数 的 组 合 覆盖 ,缺陷 发 现 能 力 越 来 越 强 。 在 实际 


应 用 中 ,两 两 组 合 覆盖 最 为 常用 。 


20 世纪 初期 工农 业 生产 中 经 常用 到 正 交 试验 设计 方法 ,后 来 人 们 把 正 交 试验 法 应 用 到 


软件 测试 中 ,利用 正 交 表 设 计 测 试用 例 。 随 着 研究 
的 深入 ,人 们 发 现在 软件 测试 中 各 种 组 合 的 覆盖 率 
不 需要 相等 ,完全 可 以 利用 覆盖 表 来 替代 正 交 表 ， 
随后 & 维 覆盖 表 在 软件 测试 中 得 到 很 好 应 用 。 考 虑 
到 在 实际 软件 系统 中 并 不 是 任意 几 个 参数 间 都 存 
在 相互 作用 :有 些 参数 根本 不 会 有 任何 交互 :人 们 
又 提出 可 变 力度 覆盖 表 。 正 交 表 、A 维 覆盖 表 和 可 
变 力 度 覆 盖 表 都 是 组 合 测试 中 常见 的 测试 用 例 集 ， 
其 关系 如 图 3-15 所 示 。 











可 变 力度 覆盖 表 测 试 


/ 维 覆 盖 表 测试 





正 交 实 验 设计 
































图 3-15 组 合 测试 与 正 交 实验 设计 
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3. 测试 设计 
给 出 一 种 满足 两 两 组 合 覆盖 的 测试 生成 方法 。 
假设 待 测 系统 共有 m 个 参数 cl ,cs，…,c ,它们 分 别 取 离散 值 Ti ,T: ,…,T ,并 设 w 一 


|T| 为 T; 所 含 元 素 的 个 数 .不 妨 设 a 三 am-i1 三 … 二 a 一 maxi<i<naj= 72。 

1) 得 到 矩阵 C 一 (cn ),xm 

矩阵 C 由 所 有 参数 的 取 值 组 成 。 具 体 方法 是 ,从 ci 开始 ,把 它 的 个 参数 依次 填 入 到 
C 的 第 一 列 中 ,然后 依次 类 推 ,把 cj 的 aj 个 参数 依次 填 人 到 C 的 第 j 列 中 。 若 C 的 某 些 参 
数 所 在 的 列 有 空位 , 则 用 该 参数 的 任意 取 值 填充 之 (对 应 于 正常 位 , 称 这 些 空位 为 补充 位 ,并 
称 在 补充 位 上 填充 的 值 为 补充 值 ) ,使 得 和 矩阵 C 的 每 列 均 及 个 元 素 。 

2) 展开 和 矩阵 

判定 与 m 的 大 小 ,如 果 nn 三 m, 执 行 步骤 (1) ;否则 ,执行 步骤 (2) 。 

(1) n 宇 m 时 ,仿照 矩阵 分 解 的 方法 将 矩阵 C 展开 ,分 为 如 下 两 步 : 

名 先 将 矩阵 C 展开 至 最 小 矩阵 。 这 里 最 小 矩阵 指 的 是 (xn 一 mw) X1 矩阵 (如 果 nn 二 mm) 或 
2X2 和 矩阵 (如 果 nn 三 m)。 

具体 方法 是 ,从 第 一 列 开始 ,用 该 列 的 每 一 个 元 素 乘 以 剩余 矩阵 ( 划 去 该 元 素 所 在 的 行 
与 列 即 得 剩余 矩阵 ), 然 后 相 加 ( 称 每 一 个 以 加 号 隔 开 的 部 分 为 一 个 测试 项 ,简称 项 ,下 同 )， 
并 循环 递 推 ,直至 展开 到 最 小 矩阵 。 在 此 过 程 中 . 需 注意 : 如 果 在 某 测试 项 中 最 小 矩阵 外 的 
地 方 出 现 了 补充 值 , 则 应 将 该 测试 项 剔除 。 

@ 展开 最 小 矩阵 。 将 上 一 步 得 到 的 各 项 继续 展开 ,得 到 最 终 的 测试 项 ,并 记 其 集合 为 
T。 在 此 过 程 中 , 需 注意 : 

(a) nn 之 m 时 ,如 果 最 小 和 矩阵 中 的 所 有 位 都 是 补充 位 , 则 任 选 且 仅 选 其 中 一 个 补充 值 与 
该 项 的 前 面部 分 组 成 最 终 项 ,添加 到 了 ;否则 , 即 最 小 矩阵 中 至 少 有 一 位 正常 位 , 则 应 分 别 把 
每 一 个 正常 位 对 应 的 值 与 该 项 的 前 面部 分 组 成 最 终 项 ,并 把 它们 都 添加 到 T。 

(b) ”一 妈 时 ,把 最 小 矩阵 中 的 补充 位 视 为 正常 位 ,将 矩阵 展开 后 与 该 项 的 前 面部 分 分 
别 组 成 最 终 项 ,添加 到 T。 

(2) n 二 m 时 , 先 把 矩阵 C 转 置 得 到 C“ (矩阵 C' 的 第 i 行 是 C 的 第 i 列 ) ,然后 仿照 矩阵 
分 解 的 方法 将 C' 展 开 , 分 为 如 下 两 步 : 

@ 先 将 C 展 开 至 最 小 矩阵 ,这 里 最 小 矩阵 指 的 是 (m 一 n)X1 答 阵 。 

@ 展开 最 小 和 矩阵。 这 一 步 与 n 宇 m 时 不 同 。 由 于 现在 的 最 小 矩阵 的 各 个 位 置 上 为 不 
同 参数 的 值 ,我 们 只 需 把 它们 依次 取出 并 与 该 项 的 前 面部 分 组 成 最 终 项 即 可 。 

3) 调整 测试 用 例 

(1) 将 矩阵 C 的 每 一 行 作 为 一 项 .添加 到 工 中 。 注 意 : 如 果 某 行 除 第 一 个 位 管 外 都 是 
补充 位 ,那么 此 行 不 应 作为 一 项 。 

(2) 由 于 补充 位 的 原因 ,TI 中 可 能 存在 重复 项 。 检 查 T. 如 果 有 重复 项 ,将 其 剔除 。 

至 此 ,我们 得 到 的 工 即 为 最 终 的 测试 用 例 的 集合 ,T 中 的 每 一 项 就 是 一 个 测试 用 例 。 


4. 实例 演示 
设 待 测 系统 的 参数 为 x，>， ,参数 取 值 分 别 为 x: a az, as, aiy: bas Da;z: cs 
cz。 则 按照 算法 .可 以 得 到 和 矩阵 C 并 将 其 展开 如 下 (右上 角 加 * 表示 补充 位 ) : 
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= abzci Tabscs 十 azpbicl 十 azpbscl tt asbics + asbzc + asbics 十 abacl arbsci + asbscs 
从 而 ,T= {aibzsci, aibscs, azsbict, azsbscis asbics, asbeci, asbics, asbzci, asbsci, asbscss» 


abicr, asbacs, asbsc } : 共 13 个 测试 用 例 。 


5. 方法 总 结 

组 合 测试 考虑 了 待 测 软件 的 各 种 因素 及 其 相互 作用 关系 ,能够 设计 出 一 组 数量 较 少 但 
能 满足 一 定 参数 组 合 覆盖 要 求 的 测试 用 例 。 研 究 表明 ,不 超过 30% 的 缺陷 是 由 3 个 及 3 个 
以 上 参数 的 相互 作用 引起 的 ,几乎 不 存在 6 个 以 上 参数 相互 作用 引发 的 故障 ,因此 组 合 测试 
是 能 够 近似 等 效 于 完全 测试 的 。 

组 合 测试 可 只 基于 需求 规格 说 明 , 只 需要 提取 可 能 影响 软件 的 参数 及 其 取 值 情况 ,不 需 
要 过 多 的 实现 细节 , 且 易 于 自动 化 实现 ,是 一 种 好 用 的 黑 盒 测 试 方法 。 

组 合 测试 也 有 一 些 不 足 ,比如 : 组 合 测试 仍 是 一 种 不 完全 测试 ,可 能 存在 测试 不 充分 的 
风险 ;如 果 待 测 系统 的 参数 及 其 取 值 选择 的 不 够 恰当 ,组 合 测试 的 作用 将 大 打折 扣 ; 如 果 没 
有 完整 的 预期 输出 ,组合 测试 的 效果 也 难以 体现 。 


3.2.6 基于 场景 测试 


1. 概念 定义 

基于 场景 测试 的 测试 由 IBM Rational 公司 较 早 提出 ,借鉴 了 软件 设计 时 用 事件 触发 控 
制 流程 形成 软件 使 用 场景 的 思想 。 同 一 事件 不 同 的 触发 顺序 和 处 理 结 果 就 形成 事件 流 , 基 
于 场景 测试 以 事件 流 为 核心 ,可 以 比较 生动 地 描绘 出 事件 触发 时 的 场景 ,有 利于 测试 设计 人 
员 设 计 测试 用 例 ,同时 使 得 测试 用 例 更 易 理解 和 执行 。 

基于 场景 测试 是 高 层 测试 设计 的 基础 ,通常 用 于 功能 测试 中 。 


2. 原理 分 析 

基于 场景 测试 以 事件 流 为 核心 通过 分 析 不 同事 件 的 触发 顺序 和 处 理 结果 ,模拟 操作 系 
统 使 其 从 初始 状态 转变 到 结束 状态 的 过 程 ,形成 不 同 的 测试 场景 。 

事件 流 分 为 基本 流 和 备 选 流 。 基 本 流 是 从 系统 的 某 个 初始 状态 开始 ,经 一 系列 状态 变 
化 后 到 达 终 止 状态 的 过 程 中 ,最 主要 的 一 个 业务 流程 。 所 谓 基 本 . 指 的 是 该 事件 流 是 整个 业 
务 流程 中 最 基本 的 一 个 流程 。 基 本 流 所 涉及 的 业务 规则 并 一 定 很 复杂 ,但 通常 被 认为 是 一 
条 最 高 风险 的 业务 流程 :比如 ,所 包含 的 功能 点 是 用 户 最 常 使 用 的 ,对 应 的 用 户 操作 是 需求 
中 规定 的 正常 操作 ,能够 反映 绝 大 多 数 用 户 操作 被 测 软件 的 顺序 ,或 者 ,该 流程 所 包含 的 功 





PE 
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能 点 涉及 某 个 复杂 的 核心 算法 ,必须 确保 其 正确 性 等。 

备 选 流 是 以 基本 流 为 基础 ,在 经 过 基本 流 上 每 个 判定 节点 处 (包含 条 件 判 定 和 循环 判 
定 ) ,满足 不 同 的 触发 条 件 而 导致 的 其 他 事件 流 。 与 基本 流 是 一 条 从 初始 状态 到 终止 状态 的 
完整 业务 流程 不 同 , 备 选 流 仅仅 是 业务 流程 的 一 个 执行 片段 。 基 于 一 个 基本 流 将 得 到 多 个 
备 选 流 , 备 选 流 的 数目 取决 于 基本 流 上 判定 节点 的 数目 与 事件 分 析 的 颗粒 度 。 

3. 测试 设计 

基于 场景 测试 的 主要 步骤 包括 以 下 4 步 。 

0) 根据 需 测试 的 业务 ,分 析 基本 流 和 备 选 流 。 

(2) 基于 事件 流 ,构建 场景 。 

(3) 根据 场景 ,设计 多 辑 测试 用 例 。 每 个 场景 对 应 于 业务 流程 中 从 开始 状态 到 结束 状 
态 的 一 系列 操作 或 执行 步骤 ,可 转化 为 测试 用 例 的 输入 条 件 和 预期 输出 。 对 应 每 个 场景 可 
设计 一 个 或 多 个 测试 用 例 , 基 本 步骤 包括 : 根据 场景 的 流程 ,分 析 系统 应 满足 的 所 有 输入 
条 件 和 预期 输出 ; @ 当 场景 中 包含 备 选 流 时 ,应 确定 该 备 选 流 触发 的 输入 条 件 并 予以 标记 。 

(4) 根据 逻辑 测试 用 例 ,设计 物理 测试 用 例 。 对 于 步骤 (3) 设 计 的 逻辑 测试 用 例 , 应 使 
用 等 价 类 划分 .边界 值 分 析 等 方法 ,设计 物理 测试 用 例 。 


4. 实例 演示 

结合 一 个 简化 的 银行 自动 柜员 机 (ATM 机 ) 系 统 进行 介绍 。 

1) 根据 需 测试 的 业务 ,分 析 基 本 流 和 备 选 流 

基本 流 的 初始 状态 是 ATM 机 系统 已 就 绪 ,屏幕 显示 欢迎 使 用 界面 。 后 续 业 务 流程 包 
括 如 下 步骤 。 

(1) 插 卡 : 用 户 将 银行 卡 插入 ATM 机 的 银行 卡 槽 中 。 

(2) 卡 校 验 : ATM 机 系统 读 取 插入 的 卡片 信息 ,判断 其 是 否 为 可 接收 的 卡 。 在 基本 流 
中 ,卡片 通过 校 验 ,进入 下 一 步 。 

(3) 输入 密码 ; 在 ATM 机 系统 要 求 后 ,用 户 输入 银行 卡 密码 。 

(4) 密码 校 验 : ATM 机 系统 将 用 户 输 入 密码 与 卡片 预 设 密码 进行 比 对 ,判断 密码 是 否 
正确 。 在 基本 流 中 .输入 的 密码 正确 ,进入 下 一 步 。 

(5) 选择 取款 交易 : 根据 ATM 机 系统 的 提示 ,用 户 在 界面 选择 取款 交易 。 

(6) 设置 取款 金额 : 根据 ATM 机 系统 的 提示 ,用 户 在 界面 输入 取款 金额 。 输 入 的 取款 
金额 具有 一 定 的 限制 条 件 ,比如 应 为 10 的 整数 倍 , 不 能 超出 日 限额 等 。 

(7) 交易 校 验 : ATM 机 系统 将 账户 信息 .交易 类 型 .交易 金额 等 作为 一 笔 交 易 发 送 银 
行 系统 进行 校 验 , 判 断 能 否 允 许 交 易 进 行 。 在 基本 流 中 ,系统 处 于 联机 状态 ,银行 批准 完成 
交易 并 更 新 账户 余额 。 

(8) 吐出 钞票 : ATM 机 系统 从 现金 槽 中 提供 用 户 要 提取 的 钞票 。 

(9) 退 卡 : ATM 机 系统 返还 用 户 的 银行 卡 。 

至 此 用 例 结束 ,ATM 机 系统 再 次 回 到 准备 就 绪 状 态 。 

根据 基本 流 中 的 3 个 关键 校 验 点 ,得 到 4 条 备 选 流 如 下 。 

备 选 流 1: 卡 错误 。 在 基本 流 步骤 (2) 处 触发 ,ATM 机 系统 进行 卡 校 验 时 判断 银行 卡 
无 效 ,将 卡片 退回 并 提示 卡 无 效 : 系 统 回 到 准备 就 绪 状 态 ,本 用 例 结束 。 
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备 选 流 2: 密码 错误 。 在 基本 流 步骤 (4) 处 触发 ,ATM 机 系统 在 进行 密码 校 验 时 为 用 
户 提供 3 次 密码 输入 机 会 ,当前 两 次 密码 输入 错误 后 ,ATM 机 系统 提示 密码 错误 ,返回 密 
码 输入 状态 ,在 基本 流 步骤 (3) 处 重新 加 入 基本 流 。 

备 选 流 3: 密码 校 验 失 败 。 在 基本 流 步骤 (4) 处 触发 ,ATM 机 系统 在 进行 密码 校 验 时 
为 用 户 提供 3 次 密码 输入 机 会 , 当 密 码 第 3 次 输入 错误 后 ,系统 提示 密码 失败 , 退 卡 (真实 情 
况 下 将 会 吞 掉 银 行 卡 并 提示 用 户 到 银行 柜台 办 理 取 卡 事宜 ),' 系 统 回 到 准备 就 绪 状 态 ,本 用 
例 结束 。 

备 选 流 4: 取款 金额 错误 。 在 基本 流 步骤 (7) 处 触发 ,ATM 机 系统 检验 用 户 输入 的 取 
款 金 额 错误 时 ,禁止 取款 ,要 求 用 户 重新 输入 取款 金额 ,系统 返回 金额 输入 状态 ,在 基本 流 步 
又 (6) 处 重新 加 入 基本 流 。 

自动 柜员 机 系统 的 基本 流 和 备 选 流 如 图 3-16 所 示 。 








结束 
图 3-16 自动 柜员 机 系统 的 基本 流 和 备 选 流 


2) 基于 事件 流 ,构建 场景 

根据 步骤 1) 中 的 基本 流 和 备 选 流 , 构 建 5 个 场景 ,分别 如 下 。 
场景 1: 取款 成 功 ,对 应 于 基本 流 。 

场景 2: 卡 错误 .对 应 于 基本 流 与 备 选 流 1。 
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场景 3: 密码 错误 ,对 应 于 基本 流 与 备 选 流 2。 

场景 4: 密码 校 验 失 败 , 对 应 于 基本 流 与 备 选 流 3。 

场景 5: 取款 金额 错误 ,对 应 于 基本 流 与 备 选 流 4。 

3) 根据 场景 ,设计 逻辑 测试 用 例 

对 于 ATM 机 系统 ,设计 测试 用 例如 表 3-15 所 示 , 表 中 的 “V?” 表 示 该 条 件 有 效 ,“X” 表 
示 其 是 触发 对 应 备 选 流 的 条 件 。 


表 3-15 自动 柜员 机 场景 测试 的 逻辑 测试 用 例 











取款 成 功 
消息 提示 








,卡片 退回 ,交易 失败 
消息 提示 ,返回 基本 流 步 又 (3) 
消息 提示 ,卡片 退回 ,交易 失败 
消息 提示 ,返回 基本 流 步 又 (6) 



























检查 设计 的 测试 用 例 集 , 查 看 是 否 所 有 输入 条 件 都 取 到 “*X” 的 情况 , 即 至 少 一 次 作为 测 
试用 例 的 触发 条 件 ,否则 测试 用 例 集 可 能 存在 漏洞 ,应 进行 分 析 。 在 表 3-15 中 , 除 账户 余额 
外 ,其 余 输入 条 件 都 取 到 过 “*X”, 而 账户 余额 不 属于 用 户 界面 输入 项 ,不 存在 漏洞 。 

4) 根据 逻辑 测试 用 例 ,设计 物理 测试 用 例 

对 于 ATM 机 系统 ,假设 存在 一 个 有 效 账户 9999-2016-0521 ,对 应 密码 是 1234。 设 计 物 
理 测试 用 例如 表 3-16 所 示 。 还 可 使 用 等 价 类 划分 ,边界 值 分 析 等 方法 ,设计 更 加 完备 的 测 
试用 例 集 。 

表 3-16 自动 柜员 机 场景 测试 的 物理 测试 用 例 























场景 EE 户 预期 输出 
账户 sa L 
1 9999-2016-0521 2 1000 取款 成 功 
区 8888-2016-0521 消息 提示 ,卡片 退回 ,交易 失败 
3 9999-2016-0521 消息 提示 ,返回 基本 流 步 又 (3) 
4 9999-2016-0521 消息 提示 ,卡片 退回 ,交易 失败 
5 9999-2016-0521 2000 | 1000 消息 提示 ,返回 基本 流 步 骤 (6) 


5. 方法 总 结 
与 等 价 划分 ,边界 值 分 析 等 方法 主要 侧重 于 测试 数据 的 选择 ,关注 输入 取 值 而 不 涉及 操 
作 的 动态 执行 过 程 不 同 . 基 于 场景 的 测试 以 事件 流 为 核心 ,通过 分 析 不 同事 件 的 触发 顺序 和 
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处 理 结果 ,构建 并 基于 事件 流 ,形成 不 同 的 测试 场景 ,最 终 基 于 测试 场景 设计 测试 用 例 。 

由 于 场景 测试 从 全 局 把 握 系统 的 整个 业务 流程 ,能 够 保证 在 多 功能 点 交叉 、 存 在 复杂 约 
束 条 件 等 情况 下 ,实现 测试 的 充分 覆盖 性 ,因此 尤其 适合 于 高 层 测试 用 例 的 设计 。 

基于 场景 测试 的 主要 难点 在 于 如 何 根据 业务 实际 提取 基本 流 , 以 及 如 何 很 好 地 控制 备 
选 流 的 数量 。 构 建 场景 时 ,可 能 存在 逻辑 上 可 行 而 事实 上 不 可 能 实现 的 场景 。 设 计 测试 用 
例 时 ,应 注意 一 个 测试 用 例 唯一 对 应 于 一 个 场景 ,但 一 个 场景 可 能 需要 设计 多 个 测试 用 例 。 

基于 场景 测试 仅 需 针 对 输入 域 进行 分 析 , 不 适用 于 从 输出 域 展开 测试 。 





3.2.7 错误 推测 法 


1. 概念 定义 

错误 推测 法 是 基于 测试 人 员 的 经 验 和 直觉 来 推测 被 测 系 统 中 可 能 存在 的 各 种 缺陷 , 进 
而 有 针对 性 地 设计 测试 用 例 的 方法 。 这 里 的 经 验 和 直觉 来 自 测 试 人 员 对 被 测 系统 特性 的 了 
解 及 其 在 以 往 测试 工作 中 的 经 历 总 结 。 


2. 原理 分 析 

错误 猜测 法 的 基本 思想 是 根据 测试 人 员 的 经 验 和 直觉 ,列举 出 被 测 系统 中 所 有 可 能 存 
在 的 缺陷 和 容易 发 生 缺 陷 的 情况 ,然后 针对 它们 ,直接 设计 和 选择 测试 用 例 。 

系统 缺陷 的 列举 和 测试 用 例 的 设计 往往 不 采用 系统 的 和 完备 的 方法 ,而 是 主要 依赖 于 
测试 人 员 的 经 验 和 直觉 。 

3. 测试 设计 

由 于 错误 猜测 主要 是 依赖 于 直觉 的 非 正规 化 的 过 程 , 很 难 描述 出 这 种 方法 的 规程 。 

错误 猜测 法 的 基本 思想 是 列举 出 可 能 存在 的 缺陷 及 发 生 这 些 缺 陷 的 常见 情况 的 清单 ， 
然后 依据 清单 来 设计 测试 用 例 。 一 般 地 ,可 从 以 下 几 个 方面 进行 错误 猜测 : 软件 产品 以 前 
版 本 中 存在 的 问题 , 受 开发 语言 .中 间 件 .操作 系统 、 浏 览 器 .网 络 设施 等 环境 的 限制 而 可 能 
带 来 的 问题 ,对 非法 的 、 错 误 的 和 无 意义 的 数据 的 识别 .容错 和 处 理 而 产生 的 问题 ,针对 代码 
资源 分 配 .内 存 泄漏 等 的 设计 等 。 

4. 实例 演示 

表 3-17 列 出 了 对 若干 常用 功能 使 用 错误 推测 法 的 部 分 测试 点 , 供 读者 参考 。 

表 3-17 ”部 分 常见 功能 的 错误 猜测 法 测试 点 


功能 名 称 测 试 点 


数字 输入 验证 : 分 别 输入 数字 ( 正 数 、 负 数 . 零 值 , 单 精度 、 双 精度 )、 
字符 串 空白 值 . 空 值 、 临 界 数值 .不 合法 的 输入 ,系统 给 出 必要 的 判 
主要 包括 数字 输入 | 断 提示 信息 

验证 .非法 字符 输入 





时 间 、 日 期 输入 验证 : 分 别 输入 任意 字符 .任意 数字 、 非 日 期 格式 的 
数据 、 非 正确 日 期 (错误 的 闫 年 日 期 )、 空 值 .空白 值 、 不 合法 的 输入 ， 
系统 给 出 必要 的 判断 提示 信息 


输入 验证 | 验证 .输入 长 度 验 
证 、 必 填 项 验证 与 信 
息 提示 等 








多 列表 选择 框 : 测试 是 否 能 够 多 选 . 列 表 框 中 的 数据 是 否 能 够 显示 
完整 。 当 列表 框 中 的 数据 过 多 时 ,需要 对 数据 有 一 定格 式 的 排序 
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功能 名 称 


功能 简介 


测 试 点 





输入 验证 


主要 包括 数字 输入 
验证 ,非法 字符 输入 
验证 ,输入 长 度 验 
证 、 必 填 项 验证 与 信 
息 提 示 等 


单列 表 下 拉 框 : 测试 是 否 能 够 手工 输入 .下 拉 框 中 的 数据 是 否 能 够 
显示 完整 。 当 下 拉 框 的 数据 很 多 时 ,需要 对 数据 有 一 定格 式 的 排序 。 
当下 拉 框 的 数据 非常 多 时 ,下 拉 框 可 能 会 超出 显示 范围 ,这 是 不 能 被 
接受 的 





大 文本 输入 框 : 它 能 够 满足 大 数据 量 的 输入 ,但 最 好 能 够 显 式 地 标 
明 输 入 字符 的 长 度 限 制 , 并 且 应 该 结合 字符 输入 验证 进行 。 需 要 注 
意 的 是 ,应 该 允许 标点 符号 的 存在 





文件 输入 框 : 主要 用 于 文件 的 上 传 操作 ,测试 时 应 注意 输入 文件 的 
扩展 名 ,上 传 的 文件 大 小 应 进行 限制 ,不 宜 过 大 。 从 测试 角度 来 说 ， 
开发 人 员 必 须 对 扩展 名 进行 输入 限制 ,并 且 在 适当 的 地 方 对 输入 格 
式 进行 提示 。 当 输入 是 空 值 等 不 合法 的 值 时 ,系统 给 出 必要 的 判断 
提示 信息 

输入 字符 长 度 验证 : 输入 字符 的 长 度 是 否 超过 实际 系统 接收 字符 长 
度 的 能 力 。 当 输入 超出 长 度 时 ,系统 给 出 必要 的 判断 提示 信息 

必 填 项 验证 : 输入 不 允许 为 空 的 时 候 , 系 统 需要 有 提示 用 户 输入 信 
息 功 能 

格式 ,规则 输入 验证 : 当 需 要 按照 规定 格式 或 指定 规则 进行 输入 时 ， 
统 需 具有 提示 用 户 输入 信 
系统 错误 定位 的 输入 验证 : 当 输入 存在 问题 被 系统 捕获 到 时 ,页 面 
的 光 够 定位 到 发 生 错 误 的 输入 框 

单 选 框 、 多 选 框 的 输入 验证 : 单 选 框 需 要 依次 验证 单 选 框 的 值 是 否 
都 有 效 ;多 选 框 需要 依次 验证 多 选 框 的 值 是 否 都 有 效 

验证 码 验 证 : 应 先 结合 字符 输入 验证 进行 测试 注意 当 利用 浏览 器 回 
退 或 者 刷新 时 ,显示 的 验证 码 应 该 和 实际 系统 码 一 致 。 如 果 验 
证 码 以 图 片 形式 显示 ,但 图 片 不 能 看 到 或 显示 不 完整 时 ,系统 应 允许 
进行 重新 获取 ,而 不 是 整个 页 面 刷 新 


























页 面 操作 


页 面 链接 检查 : 每 一 个 链接 是 否 都 有 对 应 的 页 面 ,并 且 页 面 之 间 切 
换 正 确 





按钮 功能 检查 : 增加 删除 .更改 .查询 ,提交 等 按钮 功能 是 否 正确 





重复 提交 表单 : 一 条 已 经 成 功 提交 的 记录 ,用 浏览 器 回 退 后 再 提交 ， 
检查 系统 是 否 进行 了 处 理 





多 次 浏览 器 回 退 : 检查 多 次 使 用 浏览 器 回 退 的 情况 ,在 回 退 的 地 方 
再 回 退 ,重复 多 次 ,检查 是 否 出 错 





快捷 键 检查 : 是 否 支持 常用 快捷 键 , 比 如 Ctrl 十 C.Ctrl 十 V 等 。 对 一 
手动 输入 的 字段 ,如 日 期 选择 等 ,是 否 对 快捷 键 进行 了 








回 车 键 检查 : 在 输入 结束 后 直接 键入 回 车 键 ,检查 系统 如 何 处 理 





上 传 下 载 文件 检查 : 上 传 下 载 文件 的 功能 是 否 实现 ,对 上 传 文件 的 
格式 有 何 规定 ,下 载 文件 是 否 能 够 打开 ,系统 是 否 有 解释 信息 








其 他 验证 : 在 页 面 上 的 图 片 的 大 小 是 否 合适 ,需要 第 三 方 软件 支持 
的 ,应 该 给 予 必要 的 提示 信息 等 


功能 名 称 


功能 简介 
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测 试 点 





主要 针对 登录 功能 ， 
需 结合 访问 控制 验 
证 进行 


登录 名 输入 : 进行 “输入 验证 ”, 需 注意 登录 名 是 否 区 分 大 小 写 和 
空格 





密码 输入 : 进行 “输入 验证 ” 





提交 操作 : 当 输 入 正确 的 登录 名 和 密码 后 ,应 能 够 进入 到 指定 的 页 
面 ; 当 输入 的 登录 名 或 密码 有 误 时 ,系统 限制 其 登录 ,给 出 适当 的 提 
示 信 息 且 不 应 透漏 关键 信息 。 当 遇 到 错误 时 ,应 进行 错误 页 面 测试 








重 设 操作 : 当 进 行 重 设 操作 时 ,当前 页 面 上 所 有 的 输入 项 被 清空 





除 


主要 针对 页 面 数 据 
增加 操作 


主要 针对 页 面 数据 
删除 操作 


主要 针对 页 面 数据 


添加 输入 内 容 : 进行 “输入 验证 ” 





重复 增加 验证 : 系统 应 该 限制 重复 添加 。 利 用 网 络 传输 以 及 服务 器 
的 延迟 等 ,通过 多 次 单 击 “增加 "按钮 等 进行 重复 提交 操作 ,经 常会 在 
数据 库 中 发 现 重复 数据 

操作 结果 提示 : 当 操 作成 功 或 失败 时 ,应 该 给 出 必要 的 提示 信息 
文件 数据 的 增加 : 有 些 增加 包含 了 数据 库 数据 的 增加 和 一 些 文件 的 
增加 ,此 时 的 数据 会 保存 在 多 个 地 方 , 需 要 对 相关 的 数据 做 全 面 的 
验证 

文件 数据 的 验证 : 进行 “输入 验证 "和 “文件 输入 框 输入 验证 "。 当 上 
传 的 文件 为 中 文 名 称 时 ,上 传 到 服务 器 后 可 能 会 出 现 乱 码 现象 
选择 需要 删除 的 数据 字段 : 一 般 要 求 系统 按照 ID 来 删除 整 条 记录 ， 
因为 按照 名 称 来 删除 时 ,可 能 会 遇 到 重 名 的 问题 

重复 删除 系统 应 该 限制 重复 删除 。 利 用 网 络 传输 以 及 服务 器 
的 延迟 等 ,通过 多 次 单 击 “删除 "按钮 等 进行 重复 删除 操作 ,经 常会 造 
成 数据 库 崩溃 








关联 数据 删除 : 当 被 删除 的 数据 还 关联 有 文件 时 , 需 验证 数据 库 中 
的 数据 以 及 硬盘 下 的 文件 是 否 都 被 同时 删除 
操 提示 : 当 数 据 删 除 成 功 或 失败 时 ,应 该 给 出 必要 的 提示 





修改 页 面 验证 : 打开 需要 修改 的 数据 页 面 , 注 意 与 新 增 页 面相 比 , 只 
能 修改 部 分 数据 ,有 些 关 键 字 是 不 应 允许 被 修改 的 ,并 且 两 者 数据 应 





输入 限制 验证 : 修改 页 面 上 的 输入 限制 应 与 新 增 页 面 上 的 输入 限制 
一 至 





操作 结果 提示 : 当 数 据 修改 成 功 或 失败 时 ,应 该 给 出 必要 的 提示 





辐 





了 


询 





主要 针对 页 面 查询 
操作 


条 件 输入 验证 : 条 件 输入 查询 .应 先进 行 条 件 输入 框 的 “输入 验证 ” 





条 件 组 合 查 询 : 将 多 个 条 件 进行 组 合 查询 ,结果 可 以 通过 数据 库 验 
证 . 需要 注意 的 是 ,如 果 遇 到 某 天 的 查询 时 间 段 ,有 的 数据 库 认 为 一 
天 不 包括 零点 零 分 ,有 的 数据 库 认 为 包括 





查询 结果 显示 : 所 有 的 查询 结果 应 按照 一 定 顺序 排列 ,比如 按照 名 
称 或 ID 等 





操作 结果 提示 : 当 数 据 查 询 成 功 或 失败 时 ,应 该 给 出 必要 的 提示 
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续 表 


功能 名 称 测 试 点 


分 页 显示 验证 : 当 数 据 量 很 大 时 , 需 进行 分 页 显示 ,每 页 显示 的 行 数 

应 有 限制 ,每 行 应 有 序号 标识 , 行 与 行 之 间 颜 色 要 有 一 定 的 区 分 

翻 页 按钮 : 翻 页 按钮 应 该 包括 “首页 “上 一 页 ”“ 下 一 页 ”“ 尾 页 ”以 及 

“页 面 跳 转 ”输入 框 等 ,按钮 要 能 正常 显示 和 使 用 

数据 显示 准确 性 验证 : 每 页 显示 的 数据 要 准确 ,确保 没有 查 不 出 的 

数据 ,最 好 的 做 法 是 和 数据 库 结 合 起 来 验证 

页 码 数 显示 验证 : 页 面 太 多 以 至 于 翻 页 数据 不 能 全 部 显示 时 ,应 有 

完善 的 应 对 机 制 ,比如 只 显示 当前 页 的 前 3 页 和 该 页 的 后 3 页 的 页 

码 数 

页 码 标识 验证 : 当 翻 到 某 页 时 ,系统 应 该 有 明显 的 标识 , 标 出 该 页 面 

所 处 的 页 码 

提示 页 面 显 示 : 当 系 统 出 现 错误 时 ,不 应 让 服务 器 的 调试 信息 出 现 
主要 针对 系统 异常 | 在 页 面 上 ,而 应 给 出 一 个 合适 的 提示 信息 

错误 页 面 | 情况 下 生成 的 错误 | 友好 错误 页 面 : 当 由 于 系统 繁忙 等 原因 ,无 法 及 时 给 出 正确 反馈 信 
页 面 息 时 ,系统 应 给 出 友好 的 提示 页 面 ,比如 “请 用 户 稍 后 再 试 "等 提示 

信息 








主要 针对 页 面 翻 页 
操作 





5. 方法 总 结 

有 些 测试 人 员 似 乎 天 生 就 是 测试 的 能 手 ,不 需要 使 用 因果 图 、 边 界 值 等 特殊 的 方法 ,就 
能 够 迅速 发 现 被 测 系统 中 存在 的 问题 ,甚至 是 别人 很 难 发 现 的 问题 ,这 其 实 就 是 错误 猜测 法 
的 实践 。 

错误 猜测 法 偏重 于 考虑 系统 的 非 正常 流程 .对 异常 数据 的 处 理 和 其 他 一 些 异 常情 
况 , 有 时 能 够 发 现 系 统 中 不 易 被 发 现 的 缺陷 ,但 是 用 好 错误 猜测 法 也 是 不 容易 的 ,一 般 需 
要 测试 人 员 能 够 充分 地 理解 系统 业务 .具有 丰富 的 开发 和 测试 经 验 ,甚至 掌握 全 面 的 测 
试 技术 。 

另外 ,由 于 错误 猜测 法 不 是 一 种 完备 的 方法 ,容易 造成 测试 内 容 或 测试 点 的 遗漏 ,所 以 
经 常 作为 其 他 方法 的 补充 ,与 其 他 方法 一 起 使 用 。 


3.2.8 黑 盒 测试 技术 分 析 


黑 盒 测 试 方法 主要 通过 分 析 规 格 说 明 中 被 测 软件 输入 和 输出 的 有 关 描 述 来 设计 测试 用 
例 ,不 需要 了 解 被 测 软件 的 实现 细节 ,因此 方法 简单 .适用 面 广 。 总 的 来 说 , 黑 盒 测试 的 优点 
和 缺点 都 是 明显 的 。 

黑 盒 测 试 的 优点 主要 在 于 : 

(1) 对 于 大 规模 代码 , 黑 盒 测试 比 白 盒 测试 更 加 高 效 ; 

(2) 黑 盒 测试 一 般 不 由 开发 人 员 进行 ,相对 更 客观 ， 

(3) 黑 盒 测试 有 助 于 从 软件 设计 开发 的 一 开始 就 建立 质量 准则 ; 

(4) 黑 盒 测试 不 依赖 于 程序 内 部 结构 ,与 软件 开发 相对 分 离 , 可 以 并 向 或 提前 开展 

(5) 不 要 求 测试 人 员 具 备 极 高 的 技术 能 力 , 不 要 求 掌握 软件 开发 知识 ; 
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(6) 有 助 于 识别 规格 说 明 中 含糊 .矛盾 或 歧义 的 地 方 。 

黑 盒 测试 的 缺点 主要 在 于 : 

(1) 在 没有 清晰 的 规格 说 明 的 情况 下 ,设计 测试 用 例 是 困难 和 具有 挑战 性 的 ; 

(2) 测试 用 例 设计 一 般 不 以 软件 设计 说 明 等 为 基础 ,有 时 很 难 发 现 一 些微 妙 的 输入 ; 

(3) 在 测试 时 间 有 限 的 情况 下 ,很 难 识别 和 测试 所 有 的 输入 ; 

(4) 在 黑 盒 测试 中 可 能 存在 未 被 识别 的 路 径 ; 

(5) 生成 良好 的 测试 用 例 是 耗 时 和 困难 的 工作 ; 

(6) 不 能 发 现 规格 说 明 的 错误 ; 

(7) 很 多 情况 下 ,需要 手工 进行 测试 。 

黑 盒 测试 方法 不 仅 包括 本 文 介 绍 的 方法 ,还 包括 错误 推测 法 . 正 交 试验 法 ,功能 图 法 \ 场 
景 法 以 及 元 素 分 析 法 .语法 测试 等 多 种 方法 ,限于 篇 幅 , 在 此 不 详细 介绍 。 在 实际 测试 工作 
中 ,测试 人 员 应 充分 了 解 用 户 需求 和 被 测 软 件 系统 特性 ,灵活 选用 合适 的 测试 方法 ,才能 达 
到 最 佳 的 测试 效果 。 最 后 ,作为 建议 ,给 出 黑 盒 测试 方法 的 一 般 选 择 策 略 : 

(1) 进行 等 价 类 划分 ,包括 输入 条 件 和 输出 条 件 的 等 价 划 分 ,将 无 限 测试 变 成 有 限 测 
试 ,这 是 减少 工作 量 和 提高 测试 效率 最 有 效 的 方法 ; 

(2) 在 任何 情况 下 ,都 必须 使 用 边界 值 分 析 法 ,经 验 表明 ,用 这 种 方法 设计 出 的 测试 用 
例 发 现 程序 错误 的 能 力 最 强 ; 

(3) 可 以 使 用 错误 推测 法 追加 一 些 测试 用 例 , 这 需要 依靠 测试 工程 师 的 智慧 和 经 验 ; 

(4) 对 照 程 序 迎 辑 ,检查 已 设计 出 的 测试 用 例 的 逻辑 覆 盖 程 度 , 如 果 没 有 达到 要 求 的 覆 
盖 标 准 ,应 当 再 补充 足够 的 测试 用 例 ; 

(5) 如 果 程 序 的 功能 说 明 中 含有 输入 条 件 的 组 合 情 况 , 则 一 开始 就 可 以 选用 因果 图 与 
决策 表 法 ; 

(6) 对 于 参数 配置 类 的 软件 ,要 用 组 合 测试 或 正 交 试 验 法 选择 较 少 的 组 合 方式 达到 最 
佳 效 果 ; 

(7) 对 于 业务 流 清晰 的 系统 ,可 以 利用 场景 法 贯穿 整个 测试 设计 过 程 ,并 在 测试 中 综合 
使 用 各 种 测试 方法 。 


3.3 灰 盒 测试 


3.3.1 概述 


灰 盒 测试 是 将 白 盒 测试 . 黑 盒 测 试 结合 起 来 的 一 种 无 颖 的 测试 方法 ,使 用 基于 规格 说 明 
的 测试 用 例 , 对 软件 是 否 满足 外 部 规格 说 明 进 行 确认 .并 运行 和 验证 软件 所 有 路 径 , 是 一 种 
全 生存 周期 的 测试 方法 。 

白 盒 测试 和 黑 盒 测试 各 有 其 自身 优点 :也 都 存在 难以 克服 的 不 足 , 主 要 表现 在 只 考虑 了 
软件 程序 某 一 方面 的 属性 和 特征 ,在 前 面 已 有 分 析 。 这 样 , 要 进行 全 面 的 程序 测试 ,不 得 不 
把 测试 工作 分 两 次 进行 ,用 白 盒 方 法 测试 一 次 ,再 用 黑 盒 方法 测试 一 次 ,不 但 浪费 时 间 ,而 且 
效果 不 一 定好 。 灰 盒 测试 正 是 基于 此 提出 的 , 它 较 好 地 综合 了 白 盒 测试 和 黑 盒 测试 的 优点 ， 
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克服 了 部 分 白 盒 测试 和 黑 盒 测 试 的 缺点 。 

灰 盒 测试 是 一 种 综合 测试 方法 ,基于 程序 运行 时 的 外 部 表现 并 结合 程序 内 部 多 辑 结构 
来 设计 测试 用 例 ,采集 程序 外 部 输出 和 外 部 接口 数据 以 及 路 径 执 行 信息 来 衡量 测试 结果 ,对 
软件 程序 的 外 部 需求 及 内 部 路 径 都 进行 检验 。 

灰 盒 测试 方法 以 软件 程序 的 功能 需求 和 性 能 指标 为 测试 依据 ,主要 根据 需求 规格 说 明 、 
程序 流程 图 以 及 测试 人 员 经 验 来 进行 测试 设计 。 相 比 于 白 盒 测试 而 言 , 灰 盒 测试 更 接近 黑 
盒 测试 。 

灰 盒 测试 是 一 种 全 生存 周期 的 测试 方法 ,可 用 于 多 阶段 的 测试 。 最 常见 的 是 用 于 集成 
测试 中 ,重点 关注 软件 系统 的 各 个 模块 之 间 的 相互 关联 , 即 模块 之 间 的 互相 调用 、 数 据 传递 、 
同步 / 互 斥 关系 等 。 


3.3.2 实施 步骤 


灰 盒 测试 前 , 需 做 好 充分 准备 。 除 部 署 被 测 程序 外 ,还 需要 具备 源 代码 ,准备 好 编译 与 
运行 环境 ,以 及 代码 覆盖 率 工具 。 

实施 灰 盒 测试 ,一 般 主要 包括 如 下 步骤 (如 图 3-17) : 

(1) 识别 被 测 程序 的 输入 输出 ; 

(2) 识别 被 测 程序 的 各 种 状态 ; 

(3) 识别 被 测 程序 的 执行 路 径 ; 

(4) 识别 被 测 程序 的 软件 功能 ; 

(5) 设计 测试 用 例 ( 包 括 输入 和 期 望 结 果 等 ) 集 合 ; 

(6) 执行 测试 用 例 并 检验 执行 结果 。 





识别 输入 输出 





一 回归 测试 





识别 软件 状态 


设计 测试 用 例 集 执行 测试 用 例 
识别 程序 路 径 - (测试 输入 、 期 望 结果 等 ) 检验 执行 结果 


识别 软件 功能 






































图 3-17 灰 盒 测试 的 主要 步骤 


3.3.3 灰 盒 测试 技术 分 析 


在 软件 测试 领域 , 灰 盒 测试 属于 较 新 的 测试 技术 。DO-178B 规范 中 新 近 加 入 了 利用 灰 
盒 测 试 方法 进行 测试 的 标准 。 与 白 盒 测试 和 黑 盒 测试 相 比 : 灰 盒 测试 有 以 下 特性 : 
(1) 灰 盒 测 试 根 据 规 格 说 明 来 设计 测试 用 例 , 这 同 黑 盒 测 试 一 样 ,但 要 深入 到 系统 内 部 
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的 特殊 点 同时 进行 功能 测试 和 结构 测试 ; 

(2) 灰 盒 测试 需要 了 解 程序 结构 和 代码 实现 ,这 同 白 盒 测 试 一 样 ,但 一 般 无 须 关 心 函 数 
或 程序 单元 内 部 的 实现 细节 ; 

(3) 在 执行 时 , 灰 盒 测试 一 般 地 需要 通过 编写 代码 ,调用 函数 或 者 封装 好 的 接口 的 方式 
进行 ; 

(4) 灰 盒 测试 通常 在 白 盒 测试 之 后 、 进 行 大 规模 集成 测试 之 前 ,由 测试 人 员 执行 。 

总 的 来 说 , 灰 盒 测 试 的 优点 主要 有 : 

(1) 能 够 进行 基于 需求 的 覆盖 测试 和 基于 程序 路 径 的 覆盖 测试 ， 

(2) 测试 结果 可 对 应 到 程序 内 部 路 径 , 便 于 缺陷 定位 分 析 ; 

(3) 相 比 于 黑 盒 测试 ,能 够 更 好 地 保障 测试 用 例 设 计 的 完整 性 ,提高 软件 功能 覆盖 率 ， 

(4) 能 够 减少 需求 或 设计 的 不 详细 或 不 完整 对 测试 带 来 的 不 利 影响 。 

灰 盒 测试 的 不 足 之 处 主要 在 于 : 

(1) 相 比 于 黑 盒 测 试 , 所 需 投入 的 测试 时 间 多 20%~40%，; 

(2) 相 比 于 黑 盒 测试 ,需要 测试 人 员 清 楚 系统 内 部 构成 及 其 协作 关系 ,要 求 更 高 ; 

(3) 对 程序 代码 覆盖 率 而 言 , 不 如 白 盒 测试 细致 和 深入 。 


3.4 动态 测试 技术 分 析 


经 过 多 年 的 发 展 ,软件 测试 技术 在 总 体 上 已 经 比较 成 熟 ,无 论 是 静态 测试 技术 还 是 动态 
测试 技术 ,也 不 管 是 白 盒 测试 . 黑 盒 测试 或 者 灰 盒 测试 ,都 有 了 一 些 好 用 的 测试 方法 。 当 然 ， 
这 些 方 法 各 有 优 缺 点 ,任何 一 个 都 不 能 蔡 代 另 一 种 或 者 被 另 一 种 方法 所 替代 ,也 正体 现 出 了 
客观 世界 问题 解决 的 哲学 思想 。 

一 般 地 ,如 果 对 被 测 对 象 认 知 很 少 .不 了 解 软件 内 部 结构 ,只 关注 外 部 的 变化 ,比如 外 部 
输入 ` 外 部 作用 或 被 测 软件 所 处 的 条 件 以 及 软件 输出 结果 ,要 完成 软件 测试 ,采用 黑 盒 测试 
方法 ;如 果 对 被 测 对 象 非常 熟悉 .了 解 其 内 部 结构 ,就 可 以 采用 白 盒 测试 方法 ;而 处 于 上 述 两 
种 状态 之 间 时 , 则 可 以 采用 灰 盒 测试 方法 。 

另外 ,就 软件 测试 级 别 来 说 ,一 般 地 ,在 单元 测试 阶段 ,以 白 盒 测试 方法 为 主 ; 在 集成 测 
试 阶段 ,可 使 用 黑 盒 测试 . 白 盒 测试 相 结合 的 方法 ,或 者 灰 盒 测 试 方法 :在 集成 测试 之 后 , 比 
如 确认 测试 或 系统 测试 时 ,主要 采用 黑 盒 测 试 方法 。 

对 于 某 项 具体 的 测试 方法 ,可 从 如 下 方面 进行 评价 。 

(1) 测试 用 例 对 被 测 对 象 的 覆盖 程度 。 采 用 某 种 测试 方法 设计 的 测试 用 例 对 被 测 对 象 
的 覆盖 程度 越 高 ,遗漏 缺陷 的 风险 就 越 低 。 

(2) 测试 用 例 的 元 余 程 度 。 测 试用 例 的 元 余 程 度 越 大 .测试 效率 越 低 。 每 种 测试 方法 
的 实施 实际 上 都 是 对 被 测 对 象 建 模 的 过 程 .建立 的 模型 通常 都 是 被 测 对 象 的 简化 ,生成 的 测 
试用 例 很 可 能 存在 宛 余 , 导 致 用 例 数 量 多 而 缺陷 发 现 率 低 。 

(3) 测试 用 例 集 的 规模 大 小 。 在 满足 测试 效果 的 前 提 下 ,采用 某 测试 方法 得 到 的 测试 
用 例 的 数量 越 少 ,测试 的 工作 量 一 般 就 越 小 .测试 效率 就 越 高 。 
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(4) 测试 用 例 的 缺陷 定位 能 力 。 测 试用 例 都 是 对 应 某 种 类 型 的 缺陷 而 设计 的 ,比如 输 
和 人 和 条件 边界 .异常 数据 处 理 等 ,好 的 测试 方法 能 够 在 测试 用 例 失 败 时 ,快速 隔离 和 定位 导致 
测试 用 例 失 败 的 缺陷 。 

(5) 测试 用 例 设计 的 复杂 程度 。 测 试用 例 的 设计 越 简 单 , 对 测试 人 员 的 经 验 依赖 性 越 
低 , 设 计 测 试用 例 所 需 的 工作 量 和 花费 就 越 小 ,相应 的 测试 方法 越 好 。 


CHAPTER 4 





单元 测试 


按照 软件 研制 阶段 ,软件 测试 分 为 单元 测试 .集成 测试 .配置 项 测试 .系统 测试 和 验收 测 
试 。 同 时 ,每 个 阶段 的 测试 又 可 能 包含 回归 测试 。 从 动态 测试 角度 出 发 ,单元 测试 是 最 早 开 
始 的 测试 。 另 外 ,对 于 关键 等 级 较 高 的 软件 ,单元 测试 贯穿 整个 软件 开发 生命 周期 。 因 为 ， 
在 后 续 的 软件 开发 和 测试 活动 中 , 当 软 件 发 生变 更 后 都 需要 进行 相应 的 单元 测试 。 

在 实际 的 软件 开发 项 目 中 ,存在 着 忽视 单元 测试 的 情况 。 开 发 人 员 完成 编码 后 总 是 会 
希望 尽快 进行 软件 集成 工作 ,以 便 能 够 实现 完整 的 软件 系统 。 而 实际 情况 往往 事与愿违 ,在 
后 续 的 软件 集成 .软件 配置 项 测试 .软件 系统 测试 ,甚至 到 软件 试 运行 过 程 中 不 断 出 现 问 题 。 
问题 有 时 难以 定位 ,需要 花费 大 量 的 人 力 ,时间 查 找 问题 ,解决 问题 ,使 研制 进度 无 法 保证 ， 
软件 质量 也 让 人 没有 信心 。 因 此 ,软件 开发 活动 中 应 尽早 地 开展 软件 单元 测试 , 尽 可 能 早 地 
发 现 软件 中 存在 的 错误 .从 而 降低 软件 成 本 .保证 开发 进度 。 


4.1 概述 


4.1.1 单元 测试 的 定义 


单元 测试 是 对 软件 组 成 的 最 小 单元 进行 的 测试 。 一 般 来 说 ,软件 单元 是 软件 设计 中 的 
最 小 单元 ,一 个 最 小 单元 应 有 明确 的 功能 、 性 能 和 接口 ,并 且 可 清晰 地 与 其 他 单元 划分 开 。 
根据 软件 开发 使 用 的 编程 语言 不 同 .软件 单元 的 划分 也 不 尽 相 同 , 单 元 的 选取 可 参考 如 下 
原则 : 

(1) 在 结构 化 编程 语言 ,例如 C 语言 的 程序 中 ,一般 认为 一 个 函数 就 是 一 个 单元 ; 

(2) 在 面向 对 象 编程 语言 .例如 C++ .Qt ,Java 程序 中 .可 以 将 一 个 类 作为 一 个 单元 ; 

(3) 在 可 视 化 编程 环境 下 的 面向 对 象 语言 ,例如 Visual Basic、Visual C ++ 或 C# 程 序 
中 ,可 以 将 一 个 窗 体 、 组 件 作 为 一 个 单元 。 


4.1.2 单元 测试 的 目的 
有 的 观点 认为 软件 测试 的 目的 只 在 于 发 现 软件 错误 。 其 实 , 这 种 观点 是 片面 的 。 就 软 


件 单元 测试 而 言 ,单元 测试 的 目的 是 验证 每 个 软件 单元 是 否 满足 软件 详细 设计 说 明 的 各 项 
要 求 ,同时 ,其 目的 也 包括 发 现 软 件 单元 可 能 存在 的 错误 。 根 据 现在 软件 工程 的 要 求 ,单元 
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测试 的 主要 目的 包括 : 
(1) 验证 代码 是 否 与 软件 设计 一 致 ; 
(2) 发 现 软件 代码 是 否 存 在 错误 ; 
(3) 跟踪 软件 的 实现 ; 
(4) 复核 软件 设计 对 软件 需求 的 实现 情况 。 


4.1.3 单元 测试 的 重要 性 


目前 软件 研发 机 构 对 软件 测试 的 认识 有 了 和 较 大 幅度 的 提升 ,但 基于 经 费 、 进 度 、 认 识 等 
多 方面 的 原因 ,未 开展 全 面 的 软件 单元 测试 。 在 开发 人 员 中 ,对 单元 测试 的 认识 问题 主要 表 
现在 以 下 3 个 方面 。 

1) 软件 代码 已 通过 调试 , 没 必要 再 进行 单元 测试 

不 少 开发 人 员 认 为 ,他 们 开发 的 软件 一 直 不 停 地 调试 ,通过 调试 能 够 正常 运行 的 软件 应 
该 不 存在 错误 。 因 此 ,不 需要 进行 单元 测试 。 但 实际 上 ,真正 的 软件 系统 是 非常 复杂 的 , 仅 
仅 通 过 调试 是 无 法 发 现 所 有 问题 的 。Humphry 的 研究 发 现 : 

(1) 普通 软件 工程 师 的 平均 缺陷 引入 率 为 100 个 /KLoc; 

(2) 受过 PSP 训练 的 软件 工程 师 的 平均 缺陷 引入 率 为 50 个 /KLoc。 
上 述 数据 表明 ,不 论 是 否 受 过 良好 的 培训 ,不 通过 正式 的 测试 ,代码 中 会 存在 一 定 的 问题 。 

另外 ,调试 和 测试 之 间 从 目的 上 就 存在 着 很 大 的 不 同 , 这 也 是 调试 无 法 替代 测试 的 根本 
原因 。 调 试 与 测试 在 目标 .方法 和 思路 上 都 有 所 不 同 ,两 者 之 间 的 区 别 主要 表现 在 以 下 5 个 
方面 : 

(1) 测试 从 一 个 已 知 的 状态 开始 ,使 用 预先 定义 的 过 程 , 有 预期 的 结果 ,调试 从 一 个 未 
知 的 状态 开始 ,结束 的 过 程 不 可 预知 ; 

(2) 测试 过 程 可 以 进行 设计 ,进度 可 预先 估计 ,调试 无 法 提前 设计 ,持续 时 间 也 无 法 
控制 

(3) 测试 的 目标 是 尽 可 能 多 地 发 现 软件 中 的 错误 ,调试 的 目的 是 为 了 解决 缺陷 , 找 出 原 
因 的 一 个 思维 分 析 过 程 ; 

(4) 测试 能 由 非 开发 人 员 进行 ,调试 必须 由 开发 人 员 完 成 ; 

(5) 测试 可 以 在 没有 源 代码 的 情况 下 进行 .调试 时 必须 有 源 代码 。 

调试 更 多 的 是 使 程序 能 够 正常 地 运行 .而 测试 不 仅 在 于 证 明 开 发 人 员 正 确 地 实现 了 设 
计 , 同 时 还 要 发 现 软件 中 是 否 存 在 问题 。 因 此 ,测试 能 够 更 有 效 地 发 现 软件 问题 ,更 全 面 地 
保证 软件 的 质量 。 

2) 单元 测试 绩效 不 高 

在 很 多 情况 下 ,软件 开发 人 员 在 完成 编码 .调试 后 更 愿意 直接 进行 软件 集成 ,往往 觉得 
进行 正式 的 单元 测试 工作 量 大 ,会 浪费 许多 时 间 。 而 实际 情况 是 ,软件 开发 人 员 在 完成 调试 
后 ,或 者 进行 非 正式 的 单元 测试 后 ,直接 进行 软件 的 集成 ,这 样 造成 集成 过 程 中 软件 存在 许 
多 的 问题 ,甚至 有 些 非常 低级 的 错误 导致 软件 无 法 运行 。 另 外 .将 花费 大 量 的 时 间 跟 踪 、 分 
析 、 修 复 这 些 问题 。 尽 管 这 些 问题 有 的 是 非常 低级 的 错误 ,也 可 能 造成 软件 集成 时 花费 更 多 
的 时 间 解 决 这 些 问题 。 
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许多 研究 表明 .在 生命 周期 的 早期 开展 软件 测试 ,发 现 解 决 问题 的 成 本 比 后 期 发 现 解 决 
问题 的 成 本 要 低 很 多 。 缺 陷 发 现 的 越 晚 .修复 它 所 需要 的 费用 就 越 高 ,因此 应 该 尽早 地 开展 
测试 以 发 现 和 解决 问题 。 表 4-1 是 软件 开发 不 同 阶段 修复 问题 所 需 的 费用 。 

表 4-1 各 阶段 问题 修复 所 需 费 用 

纠 错 阶 段 
需求 分 析 至 软件 设计 阶段 
编程 至 单元 测试 阶段 
部 件 至 集成 测试 阶段 
配置 项 至 系统 测试 阶段 
早期 用 户 试用 或 B 测 试 阶段 
正式 发 布 之 后 











与 后 续集 成 测试 ,配置 项 测试 和 系统 测试 相 比 ,单元 测试 所 需要 的 测试 环境 更 容易 获 
取 , 而 且 可 重用 性 更 好 。 因 此 ,从 历时 长 久 的 集成 测试 ,或 环境 要 求 较 高 的 配置 项 测试 和 系 
统 测试 来 讲 ,单元 测试 的 绩效 是 较 高 的 。 

Capers Jones 和 McGraw-Hill 给 出 了 基于 一 个 功能 点 单元 测试 .集成 测试 .系统 测试 和 
外 场 测试 所 需要 的 时 间 , 如 图 4-1 所 示 。 单 元 测 小 时 
试 的 成 本 比 集成 测试 ,系统 测试 和 外 场 测试 都 低 。 14 

3) 后 续 测试 会 发 现 Bug, 没 必要 进行 单元 
测试 

在 前 面 的 论述 中 已 经 对 该 问题 进行 了 一 些 
说 明 。 单 元 测试 是 开展 软件 研发 后 续 工 作 的 基 
础 , 若 不 开展 单元 测试 ,软件 中 的 许多 低层 次 问 
题 会 带 和 后续 的 软件 集成 中 ,将 会 造成 在 软件 
集成 过 程 中 不 停 地 解决 本 应 在 单元 测试 阶段 发 
现 和 解决 的 问题 。 而 且 在 软件 集成 阶段 对 问题 
的 定位 也 将 变 得 困难 ,将 花费 更 多 的 时 间 。 另 
外 ,更 重要 的 是 集成 、 集 成 测试 .配置 项 测试 等 
后 续 工 作 关注 的 重点 不 同 , 可 能 导致 会 忽略 许 
多 问题 ,将 未 发 现 的 问题 遗留 至 最 后 的 软件 产 
品 中 。 

综 上 所 述 ,单元 测试 是 软件 研制 阶段 中 较为 基础 的 测试 。 因 此 ,单元 测试 的 效果 将 直接 
影响 到 软件 质量 。 单 元 测试 的 重要 性 可 以 从 以 下 3 个 方面 体现 。 

(1) 进度 方面 。 如 果 做 好 了 单元 测试 ,系统 集成 .配置 项 测试 .系统 测试 和 联 调试 验 过 
程 将 会 比较 顺利 ,从 而 保证 软件 开发 的 进度 :相反 地 ,由 于 因为 时 间或 人 为 原因 不 做 或 随便 
应 付 的 单元 测试 ,将 导致 在 集成 .以 及 后 续 工 作 中 过 到 种 种 问题 ,甚至 因为 一 些 非常 低级 的 
程序 错误 浪费 许多 时 间 ,延误 软件 研制 进度 。 

(2) 效果 方面 。 从 大 量 的 软件 研制 项 目 分 析 :单元 测试 的 效果 非常 显著 。 首 先 , 做 好 单 








单元 测试 集成 测试 系统 测试 外 场 测试 
图 4-1 各 级 别 测试 时 间 效率 
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元 测试 ,在 做 后 续 的 集成 测试 .配置 项 测试 和 系统 测试 时 就 比较 顺利 。 其 次 ,在 单元 测试 过 
程 中 能 发 现 一 些 深 层次 的 问题 ,还 会 发 现 一 些 在 集成 测试 .配置 项 测试 和 系统 测试 中 难以 发 
现 的 问题 。 

(3) 成 本 方面 。 在 单元 测试 时 , 某 些 问 题 很 容易 发 现 , 修 改 所 花费 的 成 本 也 比较 低 。 如 
果 这 些 问 题 在 后 期 的 测试 中 发 现 , 修 改 所 花费 的 成 本 将 成 倍增 加 。 原 因 在 于 ,首先 这 些 问题 
的 定位 难 , 其 次 这 些 问 题 的 修改 可 能 造成 的 影响 不 容易 分 析 清 楚 , 将 使 软件 存在 问题 隐患; 
最 后 将 带 来 多 个 层次 上 的 回归 测试 。 

从 上 述 3 个 方面 分 析 , 可 以 说 明 单 元 测试 是 保证 产品 质量 的 重要 环节 ,因此 必须 深刻 认 
识 到 软件 单元 测试 的 重要 性 ,重视 软件 单元 测试 .防止 由 于 不 做 单元 测试 或 随便 应 付 而 引起 
的 后 期 大 量 时 间 及 成 本 的 消耗 。 

对 于 如 何 使 单元 测试 的 工作 量 与 测试 成 效 方面 达到 平衡 ,需要 项 目 根据 测试 人 员 特 点 
和 软件 单元 的 安全 关键 等 级 来 确定 。 


4.2 单元 测试 原则 


在 进行 软件 单元 测试 时 ,应 该 遵循 以 下 原则 。 

(1) 单元 测试 应 该 依据 软件 详细 设计 进行 。 

(2) 在 对 软件 单元 进行 动态 测试 前 ,应 对 软件 单元 的 源 代码 进行 静态 测试 。 静 态 测试 
的 内 容 一 般 包 括 : 代码 和 设计 的 一 致 性 .代码 执行 标准 的 情况 .代码 逻辑 表达 的 正确 性 、 代 
码 结 构 的 合理 性 以 及 代码 的 可 读 性 等 。 

(3) 单元 测试 应 覆盖 软件 设计 文档 中 规定 的 软件 单元 的 所 有 功能 要 求 。 

(4) 应 对 单元 的 健壮 性 进行 测试 。 

(5) 应 对 单元 的 内 存 使 用 率 、 响 应 时 间 等 进行 测试 。 

(6) 测试 用 例 的 输入 应 至 少 包括 有 效 等 价 类 值 无效 等 价 类 值 和 边界 数据 值 , 既 要 对 正 
常 的 处 理 路 径 进 行 测试 :也 要 对 异常 处 理 路 径 进行 测试 。 

(7) 对 于 安全 关键 等 级 较 高 的 软件 (例如 A、B 级 软件 ) ,单元 测试 的 语句 、 分 支 覆盖 率 均 应 
达到 100%。 对 于 用 高 级 语言 编制 的 A、B 级 软件 ,还 需 进行 修正 的 条 件 判定 覆盖 C(MC/VDC) 
100% 测 试 。 另 外 ,应 对 没有 覆盖 到 的 语句 和 分 支 进行 分 析 , 说 明 其 未 被 覆盖 的 原因 。 

(8) 应 对 单元 的 输出 数据 及 其 格式 进行 测试 。 


4.3 单元 测试 环境 


单元 测试 的 重要 特点 就 是 需要 开发 一 定 的 桩 模块 和 驱动 模块 ,这 是 单元 测试 环境 区 别 
于 其 他 阶段 测试 的 重要 标志 。 

由 于 软件 单元 往往 不 是 一 个 能 够 独立 运行 的 程序 ,所 以 在 进行 单元 测试 时 必须 开发 测 
试用 的 桩 模块 和 驱动 模块 。 驱 动 模块 将 测试 数据 注入 要 测试 的 软件 单元 ,替代 调用 被 测 软 
件 单元 的 角色 ,同时 驱动 模块 需要 记录 相关 结果 。 桩 模块 的 作用 是 蔡 代 被 测 单元 需要 调用 
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的 软件 单元 ,需要 实现 与 被 测 单元 的 接口 ,模拟 相应 的 操作 ,提供 处 理 结果 的 记录 。 

建立 单元 测试 环境 的 主要 工作 包括 : 

(1) 开发 必须 的 桩 模块 和 驱动 模块 ; 

(2) 准备 单元 测试 数据 ; 

(3) 获取 单元 测试 工具 ,包括 购置 和 开发 测试 工具 。 

测试 环境 需要 保证 能 够 开展 动态 测试 外 ,还 应 能 够 支持 测试 结果 记录 ,测试 覆盖 率 记录 
等 。 如 图 4-2 所 示 单 元 测试 环境 , 当 被 测 软 件 单元 需要 调用 多 个 模块 才能 完成 单元 测试 时 ， 
需要 开发 桩 模块 模拟 被 调用 的 软件 单元 ,如 图 中 桩 模块 1 一 2; 若 被 调用 的 软件 单元 已 通过 
测试 时 ,可 直接 使 用 而 不 必 开发 桩 模块 ,如 图 中 软件 单元 1 一 m。 


期 望 结果 
测试 用 例 输入 一 ~| 















桩 模块 ” 





图 4-2 单元 测试 环境 示意 图 


驱动 模块 和 桩 模块 的 设计 原则 包括 : 

(1) 设计 驱动 模块 和 桩 模块 时 应 考虑 测试 用 例 执 行 所 需 满足 的 环境 因素 ,例如 前 置 条 
件 、 后 置 条 件 等 ; 

(2) 应 充分 考虑 驱动 模块 和 桩 模块 的 复 用 性 ; 

(3) 桩 模块 的 设计 应 保证 功能 上 与 其 替代 的 软件 单元 的 一 致 性 ; 

(4) 尽量 使 测试 数据 与 测试 程序 分 离 ,提高 测试 数据 ,测试 程序 的 灵活 性 和 重用 性 。 

在 建立 单元 测试 环境 时 ,驱动 模块 的 功能 应 满足 如 下 要 求 。 

(1) 应 可 以 接收 测试 数据 输入 。 输 入 可 以 包括 人 工 输入 ,数据 文件 输入 等 ,测试 数据 不 
仅 包括 注入 被 测 软件 单元 的 数据 ,还 可 包括 期 望 结果 数据 。 

(2) 将 测试 数据 注入 被 测 软件 单元 。 一 般 情 况 采用 调用 被 测 单元 的 方式 进行 ,利用 参 
数 传递 将 输入 数据 注入 被 测 单元 。 

(3) 记录 和 输出 测试 结果 。 

在 建立 单元 测试 环境 时 , 桩 模块 的 功能 应 满足 如 下 要 求 。 

(1) 正确 地 完成 被 模拟 软件 单元 的 基本 功能 。 这 里 所 谓 的 完成 基本 功能 并 非 真正 实现 
被 模拟 软件 单元 的 功能 .而 是 简单 地 按照 测试 用 例 的 需要 .将 调用 被 模拟 软件 单元 的 结果 返 
回 给 被 测 软 件 单元 。 

(2) 能 够 被 正确 调用 ,在 参数 个 数 .类 型 顺序 等 方面 与 被 模拟 软件 单元 一 致 

(3) 有 返回 值 。 若 被 模拟 软件 单元 有 返回 值 , 应 根据 测试 用 例 的 要 求 返回 被 模拟 软件 
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单元 应 有 的 返回 值 。 
桩 模块 和 驱动 模块 开发 的 工作 量 较 大 .有些 还 较为 复杂 ,此 时 可 以 根据 实际 情况 采取 相 
应 的 单元 测试 策略 。 


4.4 单元 测试 策略 


选择 合适 的 单元 测试 策略 ,对 提高 单元 测试 效率 有 较为 重要 的 影响 。 根 据 软件 设计 体 
现 的 软件 各 单元 的 相互 关系 和 开发 的 进度 ,可 采用 自 项 向 下 、 自 底 向 上 和 独立 的 单元 测试 策 
略 , 但 大 多 数 情况 下 ,采用 综合 上 述 3 种 策略 的 方法 开展 单元 测试 。 


4.4.1 自 顶 向 下 
自 顶 向 下 单元 测试 策略 是 将 顶层 单元 所 调用 的 软件 单元 作为 桩 模块 ,进行 顶层 模块 的 


测试 ,随后 对 第 二 层 单元 进行 测试 ,并 使 用 项 层 已 测试 过 的 单元 作为 驱动 模块 。 以 此 类 推 完 
成 所 有 单元 的 测试 ,如 图 4-3 所 示 。 图 中 第 二 层 的 B2 单元 测试 时 ,可 将 Al 作为 驱动 模块 。 
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图 4-3 自 顶 向 下 测试 策略 示意 图 


该 测试 策略 的 优点 主要 有 : 

(1) 单元 测试 的 顺序 与 软件 设计 的 顺序 一 致 ; 

(2) 可 以 使 设计 、 编 码 、 测 试 同步 进行 ; 

(3) 减少 开发 驱动 模块 的 工作 ; 

(4) 可 以 完成 部 分 集成 测试 工作 。 

该 测试 策略 的 缺点 主要 有 : 

(1) 低层 单元 的 测试 须 等 待 上 层 单元 测试 完成 后 才 可 进行 ,缺乏 并 行 的 灵活 性 ,测试 周 
期 较 长 ; 

(2) 随 着 测试 的 深入 , 越 是 低层 次 ,其 结构 覆盖 率 就 越 难 达到 ; 

(3) 当 上 层 单元 修改 时 ,其 下 层 的 所 有 单元 都 要 被 重新 测试 。 

该 策略 可 以 节省 部 分 桩 模块 、 驱 动 模块 的 开发 工作 .但 受 桩 模块 驱动 模块 的 限制 ,测试 
的 充分 性 难以 保证 。 






































4.4.2 自 底 向 上 


自 底 向 上 单元 测试 策略 是 先 对 最 低层 的 单元 进行 测试 ,然后 以 最 低层 作为 桩 模块 进行 
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上 层 单元 测试 ,以 此 类 推 完成 所 有 模块 的 测试 。 如 图 4-3 所 示 ,第 二 层 的 B2 单元 测试 时 ,可 
将 C1 一 C4 作为 桩 模块 。 

该 测试 策略 的 优点 主要 有 : 

(1) 减少 开发 桩 模块 的 工作 ; 

(2) 可 以 完成 部 分 集成 测试 工作 ; 

(3) 测试 用 例 可 以 针对 功能 进行 设计 ,而 不 必 依 赖 设计 结构 。 

该 测试 策略 的 缺点 主要 有 : 

(1) 上 层 单 元 的 测试 须 等 待 低层 单元 测试 完成 后 才 可 进行 ,缺乏 并 行 的 灵活 性 ,测试 周 
期 较 长 ; 

(2) 随 着 测试 的 深入 , 越 是 高 层次 ,其 结构 覆盖 率 就 越 难 达到 ; 

(3) 当 低 层 单元 修改 时 ,其 上 层 的 所 有 单元 都 要 被 重新 测试 ; 

(4) 单元 测试 需要 等 所 有 单元 设计 ,编码 完成 后 才能 进行 ,无 法 进行 并 行 工作 。 

该 方法 在 开发 进度 不 紧张 时 是 较 好 的 选择 ,但 由 于 该 策略 是 面向 功能 的 测试 ,很 难 满足 
结构 覆盖 的 要 求 。 


4.4.3 独立 单元 


独立 单元 测试 策略 是 指 不 考虑 每 个 单元 与 其 他 单元 之 间 的 关系 ,为 每 个 模块 设计 桩 模 
块 和 驱动 模块 ,对 每 个 单元 进行 独立 的 单元 测试 。 

该 测试 策略 的 优点 主要 有 : 

(1) 简单 . 易 操作 ; 

(2) 由 于 各 单元 不 存在 依赖 性 ,可 并 行 开展 工作 ; 

(3) 可 以 达到 较 高 的 覆盖 率 ; 

(4) 可 通过 增加 人 员 提 高 单元 测试 效率 。 

该 测试 策略 的 缺点 主要 有 : 

(1) 需要 大 量 的 桩 模块 .驱动 模块 开发 工作 ; 

(2) 需要 详细 的 结构 设计 信息 ; 

(3) 无 法 兼顾 集成 测试 工作 。 

该 策略 是 较 好 的 ,也 是 较为 常用 的 单元 测试 策略 。 

综 上 所 述 3 种 单元 测试 策略 ,为 了 减少 桩 模块 .驱动 模块 开发 的 工作 量 , 可 以 考虑 综合 
上 述 3 种 策略 开展 单元 测试 工作 。 最 终 选 择 哪 种 测试 策略 ,需要 根据 软件 的 结构 特点 和 软 
件 单元 开发 的 进度 情况 进行 综合 考虑 。 


4.5 单元 测试 内 容 


单元 测试 的 目的 是 验证 代码 是 否 满足 设计 的 要 求 .并 发 现在 编码 过 程 中 引入 的 错误 。 
单元 测试 的 主要 内 容 包 括 : 功能 测试 ,性 能 测试 .接口 测试 .局 部 数据 结构 测试 .边界 条 件 测 
试 ,独立 路 径 测试 和 错误 处 理 测试 。 
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4.5.1 功能 测试 


软件 单元 测试 的 功能 测试 是 对 软件 设计 文档 规定 的 软件 单元 的 功能 进行 验证 。 针 对 软 
件 设 计 文档 分 配给 软件 单元 的 每 一 项 功能 进行 测试 ,确认 已 实现 的 功能 是 否 满足 软件 设计 
文档 的 要 求 。 


4.5.2 性 能 测试 


软件 单元 测试 的 性 能 测试 是 对 软件 设计 文档 规定 的 软件 单元 的 性 能 进行 验证 。 例 如 精 
度 、 时 间 、 容 量 , 应 测试 软件 单元 所 实现 的 性 能 指标 是 否 满足 设计 要 求 。 


4.5.3 接口 测试 


软件 单元 测试 的 接口 测试 是 验证 进出 单元 的 数据 流 是 否 正确 ,接口 测试 是 单元 测试 的 
基础 。 对 单元 接口 数据 流 的 测试 必须 在 其 他 测试 之 前 进行 。 

针对 单元 接口 进行 的 测试 ,主要 涉及 如 下 方面 的 内 容 : 

(1) 调用 被 测 单元 时 的 实际 参数 与 该 单元 的 形式 参数 的 个 数 、 必 性 、 量 纲 、 顺 序 是 否 一 致 ; 

(2) 被 测 单 元 调用 下 层 单元 时 ,传递 给 下 层 单元 的 实际 参数 与 下 层 单元 的 形式 参数 的 
个 数 、 属 性 、 量 纲 、 顺 序 是 否 一 致 ; 

(3) 是 否 修 改 了 只 作为 输入 值 的 形式 参数 ; 

(4) 调用 内 部 函数 的 参数 个 数 、 届 性 、 量 纲 、 顺 序 是 否 正确 ; 

(5) 被 测 单元 在 使 用 全 局 变量 时 是 否 与 全 局 变量 的 定义 一 致 ; 

(6) 在 单元 有 多 个 入 口 的 情况 下 .是 否 引用 了 与 当前 入 口 无 关 的 参数 ; 

(7) 常数 是 否 当 作 变 量 来 传递 ; 

(8) 输入 /输出 文件 属性 的 正确 性 ; 

(9) OPEN 语句 的 正确 性 ; 

(10) CLOSE 请 句 的 正确 性 ; 

(11) 规定 的 输入 /输出 格式 说 明 与 输入 /输出 语句 是 否 匹配 ; 

(12) 缓冲 区 容量 与 记录 长 度 是 否 匹 配 ; 

(13) 文件 是 否 先 打开 后 使 用 ; 

(14) 文件 结束 条 件 的 判断 和 处 理 的 正确 性 ; 

(15) 输入 /输出 错误 是 否 检 查 并 做 了 处 理 以 及 处 理 的 正确 性 。 


4.5.4 局 部 数据 结构 测试 
在 单元 测试 中 .必须 测试 单元 内 部 的 数据 能 够 保持 完整 性 、 正 确 性 ,包括 内 部 数据 的 内 


容 、 格 式 及 相互 关系 不 发 生 错误 。 单 元 局 部 数据 结构 测试 内 容重 点 应 考虑 : 
(1) 局 部 数据 的 完整 性 ,包括 内 容 、 格 式 及 相互 关系 ; 


(2) 数据 类 型 及 其 说 明 的 正确 性 和 一 致 性 ; 

(3) 变量 名 的 正确 性 .例如 变量 名 是 否 有 拼写 错误 或 缩写 错误 ; 
(4) 变量 使 用 的 正确 性 ,例如 未 赋值 或 未 初始 化 就 使 用 变量 
(5) 初始 值 或 缺 省 值 的 正确 性 ; 

(6) 是 否 有 下 溢 、 上 溢 或 地 址 错误 ; 

(7) 全 局 数据 对 软件 单元 的 影响 。 





4.5.5 边界 条 件 测试 


在 对 单元 进行 边界 条 件 测试 时 ,应 采用 边界 值 分 析 方法 来 设计 测试 用 例 ,测试 与 边界 值 
相关 的 数据 处 理 是 否 正确 。 边 界 测试 主要 检查 下 面 内容 : 

(1) 处 理 nn 维 数组 的 第 个 元 素 时 是 否 出 错 ; 

(2) 在 nn 次 循环 的 第 0 次 .第 1 次 .第 nn 次 是 否 有 错误 ; 

(3) 运算 或 判断 中 取 最 大 和 最 小 值 时 是 否 有 错误 ; 

(4) 数据 流 、 控 制 流 中 刚好 等 于 、 大 于 小 于 确定 的 比较 值 时 是 否 出 现 错误 等 。 


4.5.6 独立 执行 路 径 测试 


单元 测试 中 ,最 主要 的 测试 是 针对 路 径 的 测试 ,在 测试 中 应 对 模块 中 每 一 条 独立 路 径 进 
行 测 试 。 需 要 特别 注意 的 测试 内 容 主要 包括 以 下 内 容 。 

(1) 计算 错误 ,包括 : 

QO@ 算术 优先 级 不 正确 ; 

@ 混合 类 型 的 运算 不 正确 ; 

@ 初始 化 不 正确 ; 

@ 算法 不 正确 ; 

加 运算 精确 度 不 满足 精度 要 求 ; 

@@ 表达 式 的 符号 表示 不 正确 。 

(2) 比较 和 控制 流 错误 ,包括 : 

@ 不 同 数据 类 型 的 比较 ; 

G@ 不 正确 的 逻辑 运算 符 或 优先 次 序 ; 

@ 因 浮 点 运算 精度 问题 而 造成 的 比较 不 相等 ; 

@ 关系 表达 式 中 不 正确 的 变量 和 比较 符 ; 

@ 错误 或 不 可 能 的 循环 终止 条 件 ; 

@ 循环 变量 修改 不 正确 。 


4.5.7 错误 处 理 测试 


良好 的 软件 设计 应 该 考虑 软件 投入 运行 后 可 能 发 生 的 错误 ,并 在 程序 中 采取 相应 的 措 
施 。 错 误 处 理 测试 的 重点 是 检验 如 果 模 块 在 工作 中 发 生 了 错误 ,其 中 的 出 错 处 理 是 否 有 效 。 
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错误 处 理 常见 问题 主要 有 : 
(1) 所 提供 的 错误 描述 难以 理解 ; 
(2) 所 提供 的 错误 描述 信息 无 法 确定 引发 错误 的 位 置 或 原因 ; 
(3) 显示 的 错误 提示 与 实际 错误 不 一 致 ; 
(4) 对 错误 条 件 的 处 理 不 正确 ; 
(5) 对 可 能 发 生 的 错误 未 进行 异常 处 理 。 


4.6 单元 测试 方法 


单元 测试 的 依据 是 软件 详细 设计 ,测试 人 员 应 根据 详细 设计 说 明和 源 程序 ,了 解 软件 单 
元 的 VO 条 件 和 模块 的 逻辑 结 构 。 一 般 情况 下 ,应 首先 采用 静态 测试 技术 进行 测试 ,然后 
根据 静态 测试 的 情况 对 软件 单元 进行 动态 测试 ,检验 软件 单元 是 否 完成 了 规定 的 功能 和 非 
功能 需求 。 


4.6.1 静态 测试 


静态 测试 一 般 采 用 代码 审查 .代码 走 查 .静态 分 析 。 


1. 代码 审查 

代码 审查 是 检查 代码 和 设计 的 一 致 性 .代码 执行 标准 的 情况 .代码 逻辑 表 达 的 正确 性 、 
代码 结构 的 合理 性 以 及 代码 的 可 读 性 。 代 码 审查 应 根据 所 使 用 的 语言 和 编码 规范 确定 审查 
所 用 的 检查 单 , 检 查 单 的 设计 应 经 过 评审 并 得 到 相关 方 的 确认 。 相 关 方 一 般 应 包括 软件 研 
发 任务 和 软件 测试 工作 的 交办 方 。 代 码 审 查 一 般 需 使 用 工具 完成 。 审 查 内 容 包括 (以 结构 
化 为 例 ) : 

(1) 格式 ， 

(2) 程序 语言 的 使 用 ; 

(3) 数据 引用 ; 

(4) 数据 声明 ; 

(5) 计算 ; 

(6) 比较 ; 

(7) 入口 和 出 口 ; 

(8) 存储 器 使 用 ; 

(9) 控制 流 ; 

(10) 参数 ; 

(11) 敢 辑 和 性 能 ; 

(12) 维护 性 和 可 靠 性 。 


2. 代码 走 查 
代码 走 查 是 由 测试 人 员 组 成 小 组 ,准备 一 批 有 代表 性 的 测试 用 例 ,模拟 计 算 机 沿 程序 的 


多 辑 运行 测试 用 例 ,查找 被 测 软件 缺陷 。 代 码 走 查 应 : 
(1) 由 测试 人 员 集 体 阅 读 讨 论 程序 ; 
(2) 用 “ 脑 ” 执 行 测试 用 例 并 检查 程序 。 
代码 走 查 和 代码 审查 的 区 别 见 表 4-2。 


表 42 代码 走 查 和 代码 审查 的 区 别 

















代码 走 查 代码 审查 
目标 逻辑 错误 代码 标准 规范 
准备 通读 设计 ,编写 用 例 工具 ,检查 单 
形式 会 议 非 会 议 
参与 人 员 开发 人 员 ,测试 人 员 测试 人 员 
主要 技术 方法 相关 人 员 用 “ 脑 " 执 行 测试 按 检查 单 要 求 设置 工具 中 检查 条 款 , 使 用 工具 进行 
用 例 检查 ,并 对 工具 出 具 的 检查 结果 进行 分 析 
文档 代码 走 查 报告 代码 审查 报告 
3. 静态 分 析 


静态 分 析 包 括 控制 流 分 析 数据 流 分 析 、 接 口 分 析 和 表达 式 分 析 。 一 般 情况 下 ,静态 分 
析 需 要 使 用 相应 的 工具 。 测 试 人 员 将 工具 分 析 得 到 的 结果 与 设计 文档 进行 比较 ,查找 实现 
与 设计 的 不 一 致 。 

单元 测试 静态 测试 方法 的 详细 内 容 见 第 2 章 的 描述 。 


4.6.2 动态 测试 


完成 静态 测试 后 ,还 需要 开展 动态 测试 。 动 态 测试 是 以 测试 数据 为 输入 运行 程序 并 全 
面 分 析 输 出 以 发 现 错误 的 过 程 。 动 态 测试 方法 分 为 白 盒 测 试 方法 和 黑 盒 测 试 方法 。 


1. 白 盒 测试 

白 盒 测试 方法 包括 多 辑 测试 ,数据 流 测试 ,程序 变异 ,程序 插 桩 、 域 测试 和 符号 求 值 等 。 

一 般 情况 下 ,单元 测试 对 逻辑 测试 都 会 有 较为 明确 的 要 求 。 逻 辑 测试 是 测试 程序 凶 辑 
结构 的 合理 性 ,实现 的 正确 性 。 迪 辑 测 试 应 由 测试 人 员 利 用 程序 内 部 的 收 辑 结构 及 有 关 信 
息 ,设计 或 选择 测试 用 例 ,对 程序 所 有 好 辑 路 径 进行 测试 。 通 过 在 不 同 点 检查 程序 的 状态 ， 
确定 实际 的 状态 是 否 与 预期 的 状态 一 致 。 罗 辑 测试 一 般 需 进行 : 

(1) 语句 覆盖 ; 

(2) 判定 覆盖 ; 

(3) 条 件 覆 盖 ， 

(4) 条 件 组 合 覆盖 ; 

(5) 路 径 覆 盖 。 


2. 黑 盒 测试 
黑 盒 测 试 方法 主要 用 于 软件 单元 的 功能 和 性 能 方面 的 测试 ,单元 测试 中 黑 盒 测试 常用 
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的 方法 和 技术 包括 : 

(1) 等 价 类 划分 法 ; 

(2) 边界 值 分 析 法 ; 

(3) 错误 推测 法 ; 

(4) 因果 图 法 。 

在 进行 功能 测试 时 .需要 考虑 使 用 正常 数据 边界 数据 和 异常 数据 来 进行 测试 。 另 外 ， 
还 需要 考虑 接口 测试 等 。 

单元 测试 动态 测试 方法 的 详细 内 容 见 第 3 章 的 描述 。 


4.7 单元 测试 用 例 设计 


对 单元 测试 用 例 的 设计 就 如 同 选 择 单元 测试 策略 一 样 ,不 能 只 选择 一 种 单一 的 策略 ,而 
是 综合 考虑 测试 效率 ,将 4.4 节 中 描述 的 3 种 测试 策略 综合 考虑 ,以 便 获 取 最 佳 的 测试 效 
率 。 单 元 测试 用 例 的 设计 也 是 如 此 ,不 能 仅 参考 具体 的 代码 ,也 不 能 仅 将 单元 作为 一 个 黑 盒 
来 进行 测试 用 例 设计 。 也 就 是 说 ,不 仅 要 测试 软件 单元 是 否 做 了 它 应 该 完成 的 事 , 同 时 还 要 
测试 软件 单元 是 否 有 未 赋予 它 的 职能 。 因 此 ,单元 测试 时 应 了 解 软件 单元 的 内 部 结构 ,依据 
软件 详细 设计 文档 测试 软件 单元 是 否 实现 了 应 当做 的 ,同时 又 没有 多 余 的 代码 。 

单元 测试 用 例 设 计 可 以 从 以 下 5 个 方面 考虑 。 

(1) 为 系统 运行 设计 用 例 。 第 一 个 单元 测试 用 例 一 般 应 覆盖 该 软件 单元 的 主要 功能 ， 
主要 基于 两 个 目的 : 

@ 证 明 单元 已 具备 开始 测试 的 条 件 ; 

@ 验证 单元 测试 环境 的 可 用 性 。 

常用 的 测试 用 例 设 计 方 法 包括 : 

@ 规范 导出 法 ; 

@ 等 价 类 划分 。 

(2) 正 向 测试 用 例 设 计 。 测 试 人 员 应 该 依据 软件 详细 设计 文档 设计 单元 测试 用 例 , 正 
向 测试 用 例 的 作用 就 是 验证 详细 设计 文档 中 所 规定 的 功能 ,性 能 指标 是 否 实现 。 可 使 用 等 
价 类 划分 方法 设计 测试 用 例 。 测 试用 例 设计 时 ,应 注意 需要 覆盖 所 有 的 功能 、 性 能 要 求 。 

(3) 道 向 测试 用 例 设计 。 首 向 测试 就 是 验证 被 测 软件 单元 没有 做 它 不 应 该 做 的 事情 。 
在 设计 测试 用 例 前 应 对 软件 单元 进行 静态 分 析 , 比较 静态 分 析 结果 与 软件 详细 设计 文档 是 
否 一 致 ,验证 软件 实现 是 否 正 确 。 在 此 基础 上 ,可 使 用 的 测试 用 例 设计 方法 包括 : 

中 错误 猜测 法 ; 

@ 边界 值 分 析 法 。 

(4) 特殊 要 求 的 测试 用 例 设计 。 在 对 安全 关键 等 级 较 高 的 软件 进行 单元 测试 时 ,需要 
对 软件 单元 的 性 能 ,安全 性 \ 保 密 性 等 设计 测试 用 例 。 常 使 用 的 方法 是 规范 导出 法 ,以 及 在 
安全 性 分 析 的 基础 上 进行 用 例 设 计 。 

(5) 覆盖 率 测试 用 例 设计 。 通 过 上 述 (1) 一 (4) 进 行 的 测试 用 例 设计 已 经 可 以 开展 单元 
测试 了 ,但 为 了 达到 软件 单元 测试 的 充分 性 要 求 .需要 满足 一 定 的 覆盖 率 指标 。 当 执行 完 上 
述 测试 后 若 未 能 达到 覆盖 率 指标 要 求 .还 需要 分 析 覆 盖 率 情况 ,确定 未 覆盖 的 原因 ,以 便 有 
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针对 性 地 补充 设计 测试 用 例 。 当 确实 因 用 例 设计 不 充分 时 ,可 根据 分 析 结 果 补 充 相 应 的 测 
试用 例 。 未 达到 覆盖 率 的 原因 可 能 有 : 

@ 不 可 能 注入 的 条 件 ; 

@ 不 可 达 或 元 余 代 码 ; 

@ 不 充分 的 测试 用 例 。 





4.8 单元 测试 过 程 


单元 测试 依据 软件 设计 文档 ,按照 如 图 4-4 所 示 过 程 开展 测试 ,单元 测试 过 程 分 为 以 下 


4 个 阶段 。 
uC 
测试 策划 单元 测试 计划 








a 和 代码 审查 问题 报告 
本 静态 分 析 问 题 报告 
i C0)— wg 
人 代码 走 查 问题 报告 
单元 测试 说 明 
动态 测试 设计 单元 测试 环境 
动态 测试 人 党 


本 到 单元 测试 记录 
动态 测试 执行 单元 测试 问题 报告 


A 从” Cs) jal 
测试 总 结 单元 测试 报告 


图 4-4 单元 测试 过 程 
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回归 


(1) 测试 策划 。 
(2) 静态 测试 。 


测试 。 


(3) 动态 测试 。 


依据 软件 设计 文档 进行 单元 测试 策划 ,制定 单元 测试 计划 。 
依据 单元 测试 计划 开展 软件 单元 的 静态 测试 ,并 对 静态 测试 问题 进行 


在 静态 测试 的 基础 上 ,按照 单元 测试 计划 规定 的 内 容 开 展 动 态 测试 用 


例 的 设计 ,完成 桩 模块 和 驱动 模块 的 设计 ,准备 动态 测试 数据 ,并 按照 测试 计划 、 测 试 说 明 完 
成 动态 测试 ,记录 测试 结果 ,完成 相应 的 回归 测试 。 


(4) 测试 总 结 。 


测试 。 


分 析 静 态 测 试 和 动态 测试 结果 ,分 析 测 试 的 充分 性 ,判断 是 否 通 过 单元 


4.8.1 测试 策划 


单元 测试 策划 应 尽早 进行 ,一 般 情况 下 .可 以 在 软件 设计 初步 完成 时 就 开始 进行 策划 。 
单元 测试 存在 的 问题 主要 表现 在 以 下 6 个 方面 : 

(1) 对 单元 测试 的 重要 性 认识 不 足 ; 

(2) 单元 测试 测试 开始 较 晚 ,大 部 分 受 资源 限制 ,在 编码 结束 后 才 开 始 进 行 单元 测试 ; 
(3) 单元 测试 用 例 设计 不 够 全 面 , 常 见 的 问题 表现 在 根据 已 实现 的 代码 进行 用 例 设计 ， 
而 忽略 了 依据 设计 进行 测试 的 要 求 ; 


(4) 没有 按照 一 


定 的 原则 选择 被 测 软件 单元 ,有 时 为 非常 简单 的 单元 编写 驱动 模块 和 


桩 模块 ,浪费 了 大 量 的 时 间 ， 

(5) 在 构建 测试 环境 时 ,缺乏 可 复 用 性 的 考虑 ; 

(6) 没有 考虑 使 用 有 效 的 工具 开展 单元 测试 。 

因此 ,为 了 达到 质量 .进度 ,效率 的 平衡 ,应 在 单元 测试 策划 时 考虑 如 下 因素 : 
(1) 软件 的 质量 要 求 ; 

(2) 软件 研制 的 进度 安排 ; 

(3) 软件 单元 的 关键 等 级 ; 

(4) 测试 资源 的 限制 。 

单元 测试 策划 的 内 容 包括 以 下 内 容 。 

(1) 按照 软件 设计 和 软件 质量 要 求 确定 软件 单元 测试 的 需求 。 包 括 : 
@ 需要 进行 测试 的 软件 单元 名 称 标识; 

@ 需要 测试 的 内 容 ; 

@ 提出 每 个 单元 的 测试 方法 .包括 驱动 模块 和 桩 模块 的 要 求 ; 

团 提出 每 个 单元 测试 的 充分 性 要 求 ; 

加 测试 终止 条 件 ; 


@ 优先 级 ; 


@ 对 软件 设计 文档 的 追踪 关系 。 

(2) 提出 单元 测试 环境 要 求 ,包括 测试 工具 等 。 

(3) 提出 单元 测试 人 员 安排 。 

(4) 安排 单元 测试 的 进度 计划 。 应 依据 测试 需求 .测试 环境 、 人 员 等 情况 ,制定 合理 可 
行 的 软件 单元 测试 进度 计划 。 


(5) 制定 单元 测试 通过 的 准则 。 单 元 测试 通过 的 准则 如 下 : 

@ 软件 单元 功能 与 设计 一 致 ; 

@ 软件 单元 接口 与 设计 一 致 ; 

@ 能 够 正确 处 理 输 入 和 运行 中 的 异常 情况 ; 

@ 单元 测试 发 现 的 问题 得 到 修改 并 通过 回归 测试 ; 

@ 达到 了 覆盖 率 的 要 求 ; 

@ 单元 测试 报告 通过 评审 。 

单元 测试 策划 完成 时 应 编写 软件 单元 测试 计划 。 单 元 测试 计划 是 否 合理 可 行 、 是 否 满 
足 充 分 性 要 求 是 十 分 值得 关注 的 ,因此 应 对 软件 单元 测试 计划 进行 评审 。 评 审 的 主要 内 容 
包括 : 

(1) 测试 人 员 组 成 合理 、 分 工 明确 ; 

(2) 明确 单元 测试 策略 ,测试 通过 的 准则 ; 

(3) 根据 研制 任务 书 、 软 件 设计 文档 和 其 他 软件 质量 要 求 明确 需要 进行 测试 的 软件 
单元 

(4) 测试 资源 满足 单元 测试 任 需求 ; 

(5) 对 每 个 被 测 单元 提出 圈 复 杂 度 ( 即 McCabe 复杂 性 度量 值 ) 的 度量 要 求 ; 

(6) 对 每 个 软件 单元 的 扇 人 、 扇 出 数 提出 分 析 和 统计 要 求 ; 

(7) 对 软件 单元 源 代 码 注 释 率 ( 即 有 效 注释 行 与 源 代 码 总 行 的 比率 ) 提 出 分 析 检 查 
要 求 ， 

(8) 对 软件 可 靠 性 、 安 全 性 设计 准则 和 编程 准则 提出 检查 要 求 (要 求 关键 等 级 较 高 的 软 
件 应 落实 全 部 强制 类 编程 准则 ); 

(9) 对 源 代码 与 软件 设计 文档 提出 一 致 性 的 分 析 检查 要 求 ; 

(10) 对 有 特殊 要 求 的 软件 单元 .进行 特殊 测试 ,例如 占用 空间 、 运 行 时 间 、 计 算 精 度 等 
测试 要 求 ; 

(11) 对 于 重要 的 执行 路 径 , 提 出 路 径 测 试 要 求 ; 

(12) 提出 边界 测试 要 求 ; 

(13) 明确 语句 覆盖 率 要 求 ; 

(14) 明确 软件 测试 分 支 覆盖 率 要 求 ; 

(15) 明确 修正 的 条 件 判定 覆盖 (MC/VDC) 的 覆盖 要 求 ; 

(16) 明确 提出 单元 测试 的 终止 条 件 ; 

(17) 建立 单元 测试 项 (条 目 ) 到 软件 设计 之 间 追 踪 关 系 。 





4.8.2 静态 测试 


对 软件 单元 的 静态 测试 常用 方法 包括 以 下 3 种 : 
(1) 代码 审查 ; 
(2) 静态 分 析 ; 
(3) 代码 走 查 。 
但 是 ,对 于 一 个 软件 单元 来 说 不 一 定 3 种 方法 都 用 ,根据 实际 情况 选择 最 合适 的 1 一 2 种 方 
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法 即 可 。 

一 般 情况 下 ,软件 单元 的 动态 测试 应 在 完成 静态 测试 后 , 当 所 有 的 静态 测试 问题 通过 回 
归 测 试 确认 都 得 到 解决 后 再 进行 动态 测试 较为 妥当 。 

1. 代码 审查 

按照 GJB 2725A 一 2001《 测 试 实验 室 和 校准 实验 室 通 用 要 求 ) 以 及 《军用 软件 测评 实验 
室 测 评 过 程 和 技术 能 力 要 求 ) 规 定 的 代码 审查 内 容 包 括 : 

(1) 代码 和 设计 的 一 致 性 ; 

(2) 代码 执行 标准 的 情况 ; 

(3) 代码 逻辑 表达 的 正确 性 ; 

(4) 代码 结构 的 合理 性 以 及 代码 的 可 读 性 。 

代码 审查 应 根据 研制 任务 书 中 规定 的 开发 语言 和 编码 规范 要 求 ,确定 审查 所 用 的 检查 
单 ,检查 单 应 经 过 评审 。 

表 4-3 给 出 了 某 项 目 中 对 C 语言 程序 进行 代码 审查 时 所 选 定 的 审查 项 。 

表 4-3 C 语言 代码 审查 项 示例 
序号 审 查 项 

1 过 程 名 禁止 被 重用 

2 赋值 类 型 必须 匹配 

3 符号 名 禁止 被 重用 











4 数组 下 标 必须 是 整 型 数 
”5 | 村 上 在 结构 休 定 中 人 有 SS 域 
6 禁止 对 常数 值 做 逻辑 非 的 运算 
7 禁止 声明 多 重 标号 
8 禁止 对 有 符号 类 型 使 用 位 运算 
9 参数 必须 使 用 类 型 声明 


11 在 过 程 声 明 中 必须 对 参数 说 明 

12 变量 的 使 用 禁止 超出 所 定义 的 范围 

13 禁止 过 程 参数 只 有 类 型 没有 标识 符 

14 禁止 在 条 件 判 别 语句 中 使 用 赋值 操作 符 
15 禁止 在 过 程 参数 表 中 使 用 省 略 号 

16 禁止 赋值 操作 符 与 “&&” 或 “| 1” 连 用 























17 禁止 重新 定义 使 用 C 或 C++ 关 键 字 
18 禁止 位 操作 符 带 有 布尔 型 的 操作 数 
19 禁止 过 程 /函数 中 参数 表 为 空 
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序号 审 查 项 
20 禁止 位 操作 符 作用 于 布尔 值 

21 禁止 在 宏 中 使 用 了 多 个 “# "或 “# #” 

22 字符 串 数 组 的 赋值 必须 再 所 分 配 的 空间 之 内 

23 禁止 定义 不 像 函数 的 宏 

24 禁止 移 位 操作 符 中 的 右 操作 数 为 负数 

25 禁止 在 宏 中 包含 不 允许 的 项 

26 禁止 sizeof 操作 符 的 操作 数 是 外 部 声明 的 数组 

27 禁止 重新 定义 保留 字 

28 禁止 sizeof 的 参数 是 数组 类 型 的 函数 参数 

29 字符 类 型 必须 标明 是 有 符号 还 是 无 符号 

30 禁止 “&&”*| 1” 作 符 的 操作 数 不 是 布尔 型 
31 禁止 对 一 个 名 

32 禁止 使 用 已 释放 了 的 存 

33 用 typedef 自 完 

34 动态 分 配 的 存储 

35 禁止 在 同一 个 文件 中 有 划 计 而 没有 并 endif 

36 禁止 修改 或 释放 字符 串 常量 

37 禁止 数组 没有 边界 限定 

38 与 形 参 个 数 必须 一 臻 

39 禁止 在 #include< ' 二 中 使 用 绝对 路 径 名 

40 主 过 程 所 在 文件 中 禁止 有 未 被 该 文件 中 任何 过 程 调用 的 子 过 程 
41 禁止 结构 体 声明 不 完整 

42 static 类 型 的 过 程 在 其 所 在 文件 中 必须 被 调用 

43 禁止 参数 的 声明 形式 上 不 一 臻 

44 禁止 使 用 禁用 的 过 程 、 函 数 、 文 件 或 名 称 

45 函数 参数 中 的 一 维 数组 ,禁止 限定 为 固定 长 度 

46 在 不 能 使 用 extern 的 文件 中 禁止 使 用 extern 

47 函数 参数 中 多 维 数组 ,第 一 维 禁止 限定 为 固定 长 度 ,其 他 维 禁止 为 空 
48 禁止 同一 个 表达 式 中 调用 多 个 相关 函数 

49 禁止 函数 、 变 量 或 常量 使 用 不 同 的 类 型 重 定义 

50 禁止 void 类 型 的 过 程 用 在 表达 式 中 使 用 

51 禁止 在 函数 体内 不 加 任何 注释 地 使 用 外 部 声明 
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52 禁止 void 类 型 的 变量 作为 参数 进行 传递 





53 禁止 对 同一 函数 作 多 次 声明 





54 禁止 实 参 和 形 参 类 型 不 一 致 





55 过 程 体 必须 用 大 括号 括 起 来 





56 函数 和 原型 参数 类 型 必须 一 臻 





57 循环 体 必须 用 大 括号 括 起 来 





58 禁止 单独 使 用 小 写 的 1” 或 大 写 的 "0O” 作 为 变量 名 





59 else 中 的 语句 必须 用 大 括号 括 起 来 





60 禁止 三 字母 词 的 使 用 
61 逻辑 表达 式 的 连接 必须 使 用 大 括号 
62 使 用 的 八进制 数 必须 加 以 注释 





63 禁止 在 头 文件 前 有 可 执行 代码 
64 禁止 使 用 不 起 作用 的 语句 
数 必须 用 括号 括 起 来 
66 函数 必须 有 返回 i 
67 嵌入 汇编 程序 的 过 程 必须 是 纯 汇 编程 序 
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68 禁止 返回 类 型 说 明 为 void 的 过 程 中 有 retum 语句 返回 值 
69 头 文件 名 禁止 使 用 、”“\” 和 “/” 等 字符 

70 有 返回 值 的 函数 中 return 必须 带 有 返回 值 

71 字符 型 数组 赋值 时 ,必须 使 用 "\0" 终 止 字 














72 函数 返回 类 型 必须 一 至 
73 main 函数 必须 定义 为 “int main(void)" 或 “int main(int,char * [])” 的 形式 





74 函数 和 原型 返回 类 型 必须 一 致 





75 禁止 条 件 判别 成 立时 相应 分 支 无 执行 语句 





76 当 函 数 返 回 时 ,禁止 利用 外 部 变量 指向 堆栈 区 而 对 堆栈 区 进行 引用 





77 在 “if... else if" 语 句 中 必须 使 用 有 else 分 支 





78 禁止 使 用 嵌 套 的 注 译 





79 在 “if... else if” 语 句 中 禁止 else 分 支 无 可 执行 语句 





80 禁止 使 用 不 合适 的 循环 变量 类 型 








81 在 switch 语句 中 必须 有 defult 语句 
82 循环 变量 必须 是 局 部 声明 的 








83 禁止 使 用 空 switch 语句 
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序号 审 查 
84 禁止 对 指针 变量 使 用 强制 类 型 转换 赋值 
85 禁止 switch 语句 中 只 包含 default 语句 
86 禁止 对 指针 变量 赋值 类 型 不 匹配 
87 禁止 switch 的 case 语句 不 是 由 break 终止 
88 枚 举 元 素 的 初始 化 必须 完整 
89 禁止 switch 的 case 语 句 中 无 任何 可 执行 语句 
90 结构 体 变量 初始 化 的 类 型 必须 一 致 
91 禁止 当 switch 语句 的 表达 式 是 枚 举 类 型 时 缺少 case 分 支 
92 结构 体 变量 初始 化 的 嵌 套 结构 必须 和 定义 一 致 
93 禁止 将 参数 指针 赋值 给 过 程 指针 
94 变量 使 用 前 必须 被 赋值 过 
95 禁止 指针 的 指针 超过 两 级 
96 枚 举 类 型 的 变量 的 成 员 必 须 初始 化 为 整 型 
97 止 将 过 程 声 明 为 指针 类 型 
98 数组 的 初始 化 必 
99 禁止 引用 空 指针 
100 禁止 对 实数 类 型 的 量 做 是 否 相 等 的 比较 
101 谨慎 使 用 指针 的 逻辑 比较 
102 禁止 逻辑 判别 的 表达 式 不 是 逻辑 表达 式 
103 谨慎 对 指针 进行 代数 运算 
104 switch 语句 中 的 表达 式 禁止 是 逻辑 表达 式 
105 禁止 程序 正常 自行 时 直接 从 过 程 中 跳出 
106 逻辑 判别 表达 式 如 果 存 在 运算 项 ,必须 使 用 括号 
107 禁止 使 用 goto 语句 
108 对 无 符号 数 进行 大 于 等 于 零 或 小 于 零 的 比较 
109 禁止 在 非 赋值 表达 式 中 使 用 赋值 操作 符 
110 禁止 两 个 布尔 型 变量 进行 比较 
111 数组 的 使 用 必须 保证 不 会 出 现 越界 
112 禁止 枚 举 类 型 中 的 元 素 与 已 有 变量 同名 
113 禁止 对 有 符号 类 型 进行 移 位 运算 
114 禁止 局 部 变量 与 全 局 变量 同名 
115 对 变量 进行 移 位 运算 必须 保证 不 会 产生 溢出 
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116 禁止 参数 与 全 局 变量 同名 

117 禁止 给 无 符号 变量 赋 负 值 

118 禁止 参数 与 类 型 或 标识 符 同名 

119 有 符号 类 型 的 位 长 度 必须 大 于 等 于 两 位 

120 禁止 在 内 部 块 中 重 定义 已 有 的 变量 名 

121 位 的 定义 必须 是 有 符号 整数 或 无 符号 整数 

122 禁止 在 复杂 的 表达 式 中 使 用 volatile 类 型 的 变量 
123 禁止 给 变量 赋 的 值 与 变量 的 类 型 不 一 致 

124 禁止 将 一 个 不 是 枚 举 成 员 的 值 赋 给 枚 举 变 量 





























按照 代码 审查 的 要 求 , 一 般 需 要 工具 辅助 完成 代码 执行 标准 情况 、 代 码 可 读 性 等 的 检 





查 , 例 如 : 
(1) 对 每 个 软件 单元 的 圈 复 杂 度 ( 即 McCabe 复杂 性 度量 值 ) 进 行 分 析 检 查 ; 
(2) 对 软件 单元 规模 ( 即 软件 单元 源 代码 行 数 ) 进 行 统计 ; 


(3) 对 软件 单元 的 扇 出 数 进行 分 析 和 统计 ; 
(4) 对 软件 单元 源 代码 的 注释 行 与 源 代码 总 行 数 的 比率 进行 分 析 。 
代码 审查 的 记录 应 进行 保存 ,对 代码 复杂 度 ,规模 .注释 率 、 扇 出 数 的 审查 结果 进行 记录 
的 示例 如 表 4-4 所 示 。 
表 4-4 软件 单元 复杂 度 .语句 数 、 注 释 数 、 注 释 率 、 扇 出 数 审查 结果 示例 









































编号 文件 名 称 局 号 子 程序 名 称 注释 率 扇 出 数 

1 | write_ports 64.71% 0 
2 read_ports 76.47% 0 

1 bus.c 
3 init_1553B 71.15% 1 
4 ClearINT 76. 92% 1 

2 can.c 5 init_82527 54.32% 0 
6 two_out_of_three 39.39% 0 
7 | self_data DRAM 36. 36% 2 
8 self_data 59. 15% 0 
9 | self_mode 76. 19% 3 

3 dsptms.c 
10 | Normal_mode 54. 84% 5 
11 main 51.52% 5 
12 SysInit 90.70% 3 
13 MemJInit 44. 23 %% 0 
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编号 | 文件 名 称 | 编号 子 程序 名 称 注释 率 扇 出 数 

14 c_int01 79.41% 1 
15 c_int02 60.71% 0 
16 c_int03 72.73% 0 
17 c_int04 31.97% 8 
18 c 83.33% 0 
19 c_int06 57.75% 0 
20 ManageProc 63.64% 2 
21 DataTran 68.18% 0 
22 | CANProc 57.25% 0 
23 hang_double_ram 52.38% 0 
24 TempToAscii 43.90% 0 
25 online_DRAM 54.17% 0 
3 dsptms. c 26 | online 50.00% 1 
27 write DRAM 34.58% 3 
28 | packet_data 35.47% 2 
29 write_blood 36.59% 0 
30 CAN A 74.36% 0 
31 | CAN_B 61.54% 0 
32 | CAN_C 61.54% 0 
33 CAN_D 61.54% 0 
34 | blood_disposal 31.19% 1 
35 | blood_receive 31.67% 1 
36 mem_status_self 78.57% 0 
37 PD_ASCII 37.50% 0 
38 | PD XL validity 39.13% 0 

对 于 代码 和 设计 的 一 致 性 .代码 多 辑 表达 的 正确 性 代码 结构 的 合理 性 以 及 代码 注释 行 

有 效 性 、 可 理解 性 等 ,需要 通过 人 工 阅读 代码 来 完成 。 由 于 这 部 分 的 工作 量 较 大 ,可 选择 核 

心 模式 或 逻辑 复杂 的 模块 进行 。 


2. 静态 分 析 
按照 GJB 2725A 一 2001《 测 试 实验 室 和 校准 实验 室 通 用 要 求 ) 以 及 《军用 软件 测评 实验 
评 过 程 和 技术 能 力 要 求 ) 规 定 的 静态 分 析 内 容 包 括 : 
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(1) 控制 流 分 析 ; 

(2) 数据 流 分 析 ; 

(3) 接口 分 析 ; 

(4) 表达 式 分 析 。 

静态 分 析 需 要 借助 工具 完成 ,并 根据 工具 提供 的 分 析 记 录 与 设计 文档 进行 比较 ,分 析 是 
否 与 设计 要 求 一 致 。 

下 面 给 出 用 工具 进行 的 某 软件 单元 控制 流 分 析 的 结果 示例 ,如 图 4-5 所 示 。 其 中 ， 
图 4-5(a) 为 设计 文档 中 描述 的 控制 流 , 图 4-5(b) 为 工具 分 析 得 出 的 软件 实现 的 控制 流 ， 
图 4-5(c) 为 纠 错 后 工具 重新 分 析 得 出 的 软件 实现 的 控制 流 。 





(a) 设计 描述 的 软件 控制 流 示例 
(a 一 b) 

















由 [tb 一 9) 


单 击 节点 11, 系 统 
提示 该 节点 为 虚 
拟 出 口 节 点 











(b) 控制 流 分 析 结 果 示 例 (0) 软件 更 改 后 控制 流 分 析 结 果 
图 4-5 某 软 件 单元 控制 流 分 析 的 结果 示例 


将 图 4-5(b) 的 结果 与 设计 文档 进行 比较 .发 现 该 单元 的 程序 实现 与 设计 不 一 致 ,未 实 
现 一 个 判断 分 支 , 并 违反 了 代码 实现 不 允许 有 多 个 函数 出 口 的 规则 ,具体 表现 为 源 代码 中 有 
多 个 return 返回 ,而 详细 设计 说 明 中 程序 流 图 只 有 一 个 出 口 。 
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3. 代码 走 查 

按照 GJB 2725A 一 2001《 测 试 实验 室 和 校准 实验 室 通 用 要 求 ) 以 及 (军用 软件 测评 实验 
室 测评 过 程 和 技术 能 力 要 求 ) 规 定 的 代码 走 查 是 由 测试 人 员 组 成 小 组 ,准备 一 批 有 代表 性 的 
测试 用 例 ,集体 扮 演 计算 机 的 角色 , 按 程序 的 迎 辑 ,逐步 运行 测试 用 例 ,查找 被 测 软件 缺陷 。 

由 于 代码 走 查 需要 的 人 员 和 时 间 都 比较 多 ,大 多 数 软件 研制 项 目 都 只 选择 核心 .关键 单 
元 ,或 新 开发 .变更 的 单元 进行 代码 走 查 。 

代码 走 查 的 方法 可 以 用 于 以 下 情况 : 

(1) 当 建 立 仿真 测试 环境 过 于 复杂 或 无 法 建立 ; 

(2) 动态 测试 无 法 到 达 的 路 径 ; 

(3) 软件 单元 关键 等 级 较 高 ,需要 提高 测试 充分 性 。 


4.8.3 动态 测试 


完成 静态 测试 后 ,应 进行 软件 单元 的 动态 测试 。 动 态 测试 与 静态 测试 应 从 不 同方 面 验 
证 软件 单元 ,静态 测试 和 动态 测试 无 法 相互 替代 。 

软件 单元 测试 的 动态 测试 方法 包括 : 

(1) 等 价 类 划分 ; 

(2) 边界 值 分 析 法 ; 

(3) 错误 推测 法 ; 

(4) 因果 图 法 。 

软件 单元 动态 测试 主要 是 依据 软件 设计 文档 .软件 静态 测试 结果 以 及 软件 单元 测试 计 
划 的 要 求 开 展 如 下 活动 : 

(1) 进行 单元 测试 用 例 设 计 , 并 编写 软件 单元 测试 说 明 ; 

(2) 根据 测试 设计 的 要 求 编写 驱动 模块 和 桩 模块 ; 

(3) 获取 测试 计划 中 提出 的 单元 测试 工具 ; 

(4) 对 单元 测试 环境 进行 验证 ; 

(5) 按照 测试 计划 、 测 试 说 明 执 行动 态 测 试 ,记录 测试 结果 ,提交 问题 报告 ; 

(6) 分 析 测 试 执行 情况 ,审查 测试 是 否 满足 充分 性 要 求 , 若 存 在 问题 需要 补充 相应 的 测 
试用 例 时 ,应 采取 相应 的 措施 补充 测试 用 例 以 满足 测试 充分 性 要 求 ; 

(7) 根据 问题 修改 情况 进行 回归 测试 。 

在 进行 软件 单元 的 动态 测试 过 程 中 会 提出 覆盖 率 要 求 来 保证 测试 的 充分 性 。 对 覆盖 率 
情况 ,一 般 的 单元 测试 工具 都 提供 统计 分 析 的 功能 。 软 件 测试 人 员 应 记录 软件 单元 的 动态 
测试 覆盖 率 情况 的 原始 记录 ,原始 记录 示例 如 表 4-5 所 示 。 


表 4-5 分 支 覆盖 率 统计 表 





子 程 序 名 





| write_ports 6 6 |100.00% 





1 | 1 li00.00%| 1 1 |100.00% 
1 | 1 hoo.o%| 1 1 [100.00% 





编 
时 覆盖 数 | 总 数 | 覆盖 率 | 图 盖 数 | 总 数 | 覆盖 率 | 图 盖 数 | 总 数 团 盖 率 
I 
2 


| read_ports 6 6 |100.00% 
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编 5 语句 | 语句 | 语句 分 支 |MC/DC| MC/Dc | Mc/pc 
号 覆盖 数 | 总 数 | 覆盖 率 获 盖 数 | 总 数 覆盖 率 
3 | init 1553B 34 100.00% 100.00% 9 9 100.00% 
4 | ClearINT 2 100.00% 100.00% L 100. 00% 
5 | init_ 82527 134 100.00% 66.67% 4 6 66.67% 
two_out_of_three 14 100.00% 70.00% 7 10 70.00% 
7 | self_data DRAM 94 100.00% 100. 00% 24 24 100.00% 
8 | self_data 61 100.00% 100.00% 1 1 100.00% 
9 | self mode 8 100.00% 100. 00% 4 4 100.00% 
10 | Normal_mode 36 100.00% 100. 00% 19 19 100.00% 
11 | main 16 91.67% 11 12 91.67% 
12 | SysInit 30 100.00% 1 1 100.00% 
13 | MemJnit 34 100.00% 17 I 100.00% 
14 | c_int01 19 100.00% C4 A 100.00% 
15 | c_int02 16 94.12% 75.00% 3 4 75.00% 
16 | c_int03 12 100.00% 100.00% 1 1 100.00% 
17 | c_int04 179 89.05% 87.72% 100 114 87.72% 
18 | c_int05 2 100.00% 100. 00% 1 1 100.00% 
19 | c_int06 42 100.00% 100.00% 25 25 100. 00% 
20 | ManageProc 51 96. 23% 96.43% 27 28 96.43% 
21 | DataTran 11 100.00% 100.00% 3 3 100.00% 
22 | CANProc 91 100.00% 97.50% 45 49 91.84% 
23 | hang_double_ram 10 100.00% 100.00% 洲 3 100.00% 
24 | TempToAscii 20 80.00% 85.71% 6 于 85.71% 
25 | online DRAM 13 100.00% 100.00% 1 100.00% 
26 | online 18 100.00% 100.00% | 1 100. 00% 
27 | write DRAM 145 91.19% 89.06% 57 64 89.06% 
28 | packet_data 106 88.33% 83.72% 36 43 83.72% 
29 | write_blood 28 100.00% 100. 00% 3 3 100. 00% 
30 | blood_disposal 24 100.00% 100.00% 12 12 100.00% 
31 | blood_receive 40 100.00% 100.00% 19 19 100.00% 
32 | mem_status_self 4 100.00% 100.00% 1 1 100. 00% 
33 | PD_ASCII 8 100.00% 100.00% 19 19 100. 00% 
34 | PD_XL _validity 11 100.00% 100.00% 多 100.00% 
35| CANA 27 100.00% 100.00% 4 4 100.00% 



































4.8.4 测试 总 结 


软件 单元 测试 完成 后 应 对 单元 测试 工作 进行 总 结 ,以 便 评 估 软 件 单元 测试 中 的 问题 是 
否 得 到 解决 ,单元 测试 工作 是 否 达 到 充分 性 要 求 。 单 元 测试 总 结 的 内 容 包括 以 下 内 容 。 

(1) 对 单元 测试 过 程 进 行 总 结 。 应 对 单元 测试 策划 静态 测试 ,动态 测试 过 程 进 行 总 
结 , 说 明 在 测试 策划 过 程 .静态 测试 和 动态 测试 中 开展 的 主要 工作 .参与 的 人 员 和 工作 完成 
情况 。 

(2) 对 单元 测试 方法 进行 说 明 。 应 说 明 单元 测试 所 采用 的 测试 方法 与 策略 ,并 说 明 采 
用 这 些 方法 的 依据 。 

(3) 对 单元 测试 环境 进行 分 析 。 应 说 明 单 元 测试 所 使 用 的 测试 环境 ,包括 测试 工具 、 桩 
模块 和 驱动 模块 的 情况 ,并 对 测试 环境 的 差异 性 进行 分 析 , 说 明 测试 环境 是 否 满足 单元 测试 
的 要 求 。 

(4) 对 单元 测试 结果 进行 分 析 。 单 元 测试 结果 的 分 析 应 包括 对 静态 测试 .动态 测试 以 
及 所 有 回归 测试 的 情况 的 分 析 。 主 要 内 容 包括 : 

中 测试 时 间 ; 

加 测试 人 员 ; 

@ 测试 用 例 执行 情况 .内 容 包 括 测 试用 例 数 、 通 过 的 测试 用 例 、 未 通过 的 测试 用 例 、 完 
全 执行 的 测试 用 例 、 未 完全 执行 的 测试 用 例 、 未 执行 的 测试 用 例 ; 

@ 测试 覆盖 情况 ,包括 对 软件 单元 的 覆盖 情况 ,每 个 单元 的 覆盖 情况 : 包括 语句 、 分 
支 .路 径 等 的 覆盖 情况 ,说 明 是 否 满足 测试 充分 性 要 求 ; 

@ 说 明 单元 测试 过 程 中 发 现 的 问题 ,并 对 问题 解决 情况 进行 说 明 ; 

@ 若 有 遗留 问题 应 说 明 遗 留 问题 的 处 理 措施 ; 

@ 若 有 无 法 执行 的 测试 应 说 明 后 续 测试 的 计划 等 ; 

对 软件 单元 测试 的 整体 情况 进行 评价 .并 提出 改进 的 意见 建议 。 


CHAPTER 5 





集成 测试 


集成 测试 是 在 单元 测试 的 基础 上 进行 的 ,集成 测试 是 将 所 有 的 软件 单元 按照 软件 设计 
逐步 组 装 成 软件 配置 项 . 子 系统 或 系统 的 过 程 ,并 测试 集成 后 的 各 部 分 工作 是 否 协 调 一 致 
达到 或 实现 相应 技术 指标 及 要 求 的 活动 。 因 此 ,在 集成 测试 之 前 ,软件 单元 测试 应 该 已 经 完 
成 ,集成 测试 中 所 使 用 的 对 象 应 该 是 已 经 通过 单元 测试 的 软件 单元 。 这 一 点 非常 的 关键 , 因 
为 如 果 不 经 过 单元 测试 .那么 集成 测试 的 效果 将 会 受到 很 大 影响 ,会 因为 定位 和 纠正 软件 单 
元 代码 的 错误 增加 更 多 的 工作 量 , 也 会 因为 集成 测试 的 深度 问题 而 遗漏 一 些 关键 性 的 缺陷 。 


5.1 概述 


5.1.1 集成 测试 的 定义 


集成 测试 是 在 单元 测试 的 基础 上 ,将 通过 单元 测试 的 模块 按 设计 要 求 把 它们 逐步 组 装 
起 来 ,形成 系统 ,并 进行 测试 。 

按照 系统 的 设计 ,如 果 系 统 只 包含 一 个 软件 配置 项 ,那么 集成 测试 只 需要 从 软件 单元 集 
成 为 软件 配置 项 即 可 。 如 果 系 统 由 多 个 配置 项 构成 .那么 集成 工作 将 分 为 两 步 进 行 : 一 是 
将 软件 单元 集成 为 软件 配置 项 , 称 为 配置 项 集成 测试 ;二 是 将 配置 项 (包括 软件 配置 项 和 硬 
件 配置 项 集成 为 系统 , 称 为 系统 集成 测试 。 对 于 特别 复杂 的 系统 ,可 能 包含 多 个 子 系统 ,每 
个 子 系统 中 又 包含 多 个 配置 项 。 这 种 情况 下 ,需要 进行 单元 集成 为 软件 配 蜀 项 ,配置 项 集成 
为 子 系统 , 子 系统 集成 为 系统 的 测试 。 其 中 .配置 项 集成 为 子 系统 与 配置 项 集成 为 系统 的 方 
法 和 要 求 基本 一 致 。 

在 大 型 系统 的 开发 过 程 中 ,特别 是 重大 工程 任务 中 集成 测试 一 般 分 为 多 个 层次 开展 , 按 
照 GJB 2786A 一 2009《 军 用 软件 开发 通用 要 求 》 的 划分 ,分 为 配置 项 集成 和 系统 集成 两 个 
层次 。 

集成 测试 主要 是 测试 软件 单元 或 配置 项 集成 后 能 否 正常 工作 。 集 成 测试 前 应 完成 单元 
测试 ,系统 集成 测试 前 应 完成 配置 项 测试 。 配 置 项 集成 测试 中 各 软件 单元 应 是 已 经 通过 单 
元 测试 的 软件 单元 ,系统 集成 测试 中 各 配置 项 应 是 已 通过 配置 项 测试 的 配置 项 。 这 个 条 件 
非常 重要 ,因为 如 果 不 经 过 单元 测试 或 配置 项 测试 ,集成 测试 的 效果 将 会 受到 很 大 影响 ,并 
且 会 大 幅 增加 软件 纠 错 的 代价 。 
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5.1.2 集成 测试 的 目的 


集成 测试 是 一 个 由 单元 测试 到 系统 测试 的 过 渡 测 试 ,往往 容易 被 忽视 。 造 成 的 后 果 是 
系统 测试 困难 重重 ,系统 无 法 协调 一 致 的 运行 ,软件 问题 频 发 ,发 现 的 问题 难以 定位 ,遗留 的 
软件 问题 隐患 较 多 。 因 此 ,单元 测试 后 ,应 进行 有 计划 的 集成 测试 。 

当然 ,集成 测试 的 目的 应 与 软件 研制 的 目标 保持 一 致 ,包括 在 质量 、 进 度 等 方面 的 要 求 。 
在 某 些 特殊 情况 下 ,集成 测试 可 以 结合 软件 配置 项 测试 和 系统 测试 一 起 完成 。 但 是 ,应 充分 
考虑 到 集成 测试 与 配置 项 测试 和 系统 测试 的 差异 。 一 般 情 况 下 ,应 先 完成 配置 项 集成 测试 ， 
再 进行 配置 项 测试 ,接着 应 进行 系统 集成 测试 ,最 后 进行 系统 测试 。 另 外 ,参与 集成 测试 和 
配置 项 测试 ,系统 测试 的 人 员 也 不 同 。 通 常情 况 下 ,集成 测试 由 开发 人 员 完 成 ,配置 项 测试 
和 系统 测试 由 相对 独立 的 测试 人 员 完 成 。 

单元 到 配置 项 的 集成 测试 与 软件 配置 项 测试 之 间 存 在 较为 明显 的 差异 。 它 们 之 间 的 差 
异 主 要 表现 在 以 下 5 个 方面 。 

(1) 测试 对 象 不 同 。 配 辕 项 测试 的 对 象 是 软件 配置 项 ,而 配置 项 集成 测试 的 对 象 是 单 
元 的 组 合 , 不 是 完整 的 配置 项 。 

(2) 测试 的 依据 不 同 。 配 置 项 集成 测试 的 依据 是 软件 配置 项 的 设计 文档 ,而 软件 配置 
项 测试 的 依据 是 软件 配置 项 的 研制 任务 书 和 (或 ?软件 需求 规格 说 明 。 

(3) 测试 环境 不 同 。 软 件 配置 项 集成 测试 可 以 在 开发 环境 或 仿真 环境 下 进行 ,同时 需 
要 建立 桩 模块 和 驱动 模块 ;而 一 般 情况 下 配置 项 测试 需要 在 目标 环境 下 进行 ,并 且 需 要 开发 
相应 的 仿真 程序 和 数据 捕获 程序 。 

(4) 测试 策略 不 同 。 软 件 配置 项 集成 测试 需要 根据 软件 设计 建立 相应 的 测试 策略 ,而 
软件 配置 项 测试 则 一 般 采 用 黑 盒 测 试 。 

(5) 测试 内 容 存在 差异 。 软 件 配 团 项 集成 测试 重点 关注 单元 之 间 的 接口 (配置 项 内 部 
接口 ) ,以 及 集成 后 的 单元 组 合 是 否 能 够 协调 地 完成 所 定义 的 功能 。 而 配 蜀 项 测试 则 需要 从 
软件 的 方方面面 考察 软件 研制 任务 书 和 (或 ) 软 件 需 求 规格 说 明 中 描述 的 功能 、 性 能 、 接 口 
(配置 项 外 部 接口 ) .安全 性 ,恢复 性 和 安装 性 等 是 否 符 合 要 求 。 

同样 , 配 血 项 到 系统 的 集成 测试 与 系统 测试 之 间 存在 明显 的 差异 。 它 们 之 间 的 差异 主 
要 表现 在 以 下 5 个 方面 。 

(1) 测试 对 象 不 同 。 系 统 测试 的 对 象 是 软件 系统 .而 系统 集成 测试 的 对 象 是 配 管 项 的 
组 合 , 不 是 完整 的 系统 。 

(2) 测试 的 依据 不 同 。 系 统 集成 测试 的 依据 是 系统 设计 ,而 系统 测试 的 依据 是 系统 的 
研制 任务 书 和 (或 ) 系 统 需求 规格 说 明 。 

(3) 测试 环境 不 同 。 系 统 集成 测试 可 在 开发 环境 或 仿真 环境 下 进行 ;而 系统 测试 需要 
在 目标 环境 下 进行 ,并且 需要 开发 相应 的 仿真 程序 和 数据 捕获 程序 。 

(4) 测试 策略 不 同 。 系 统 集成 测试 需要 根据 系统 设计 建立 相应 的 测试 策略 ,而 系统 测 
试 则 一 般 采 用 黑 盒 测试 方法 。 

(5) 测试 内 容 存在 差异 。 系 统 集成 测试 重点 关注 配置 项 之 间 的 接口 (系统 内 部 接口 )， 
以 及 集成 后 的 配置 项 组 合 是 否 能 够 协调 地 完成 所 定义 的 功能 。 而 系统 测试 则 需要 从 系统 的 
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方方面面 考察 研制 任务 书 和 (或 ?系统 需 求 规格 说 明 中 描述 的 功能 、 性 能 、 接 口 ( 配 置 项 外 部 
接口 )、 安 全 性 ,恢复 性 和 安装 性 等 是 否 符 合 要 求 。 


5.1.3 集成 测试 的 重要 性 


有 的 研发 人 员 会 产生 这 样 的 疑问 : 软件 单元 都 完成 了 测试 ,所 有 问题 也 得 到 了 解决 ,是 
否 还 有 必要 按照 集成 策略 进行 集成 .把 所 有 单元 放 在 一 起 进行 相应 的 配 管 项 测试 或 系统 测 
试 吗 ? 持 有 这 种 观点 的 研发 人 员 不 少 ,这 样 做 可 能 带 来 的 问题 如 下 : 

(1) 数据 可 能 在 通过 不 同 单元 时 发 生 丢失 ， 

(2) 单元 间 相互 影响 ,其 中 某 个 单元 可 能 导致 其 他 单元 无 法 正常 工作 ; 

(3) 当 单元 集成 在 一 起 时 无 法 实现 预期 的 功能 ; 

(4) 虽然 每 个 单元 都 符合 性 能 要 求 ,但 集成 后 性 能 超出 了 规定 的 要 求 ; 

(5) 全 局 数据 被 破坏 而 无 法 使 用 等 。 

基于 上 述 原因 ,有 必要 按照 一 定 的 集成 测试 策略 进行 集成 和 测试 。 在 作者 们 参与 的 大 
型 工程 软件 测试 过 程 中 ,一般 需 要 进行 单元 测试 部件 测 试 、 配 管 项 测试 和 系统 测试 。 随 着 
软件 工程 的 深入 开展 ,逐步 开展 了 集成 测试 。 这 样 一 来 部 分 研发 人 员 产 生 了 困惑 ,不 知道 该 
如 何 实施 集成 测试 。 其 实 ,部 件 测试 也 是 集成 测试 过 程 中 的 一 部 分 。 部 件 测试 是 将 部 分 单 
元 一 次 集成 为 部 件 . 然 后 进行 的 测试 。 因 此 .部 件 测试 是 集成 测试 过 程 中 的 一 部 分 ,完成 了 
部 分 的 集成 测试 工作 。 

根据 开发 模型 的 定义 应 首先 进行 软件 配置 项 的 集成 测试 ,然后 才能 进行 系统 集成 测试 。 
系统 的 组 成 如 图 5-1 所 示 。 如 图 5-1(a) ,系统 由 软件 配置 项 (CSCID1 一 ?组 成 。 如 图 5-2 所 
示 , 其 中 某 个 CSCI 由 软件 单元 (CSU)1 一 冯 组 成 。 有 时 ,由 于 系统 的 复杂 性 ,可 能 还 存在 
子 系统 的 设计 , 即 在 系统 和 软件 配置 项 之 间 存 在 子 系统 的 设计 ,如 图 5-1(b) 所 示 , 那 么 集成 
测试 还 需要 考虑 子 系统 的 集成 测试 。 本 文 为 了 描述 方便 ,选择 了 简单 系统 的 设计 ,只 描述 配 


置 项 集成 测试 和 系统 集成 测试 。 
软件 系统 


软件 子 系统 1 已 软件 子 系统 


cscu | | cscl2 | …… [cscm cscn | [ cscp … |cscrr-l cscm | 




























































































(a) (b) 
图 5-1 系统 组 成 


实践 证 明 ,对 于 较为 复杂 的 系统 ,如 果 不 尽 早 地 进行 集成 测试 ,等 到 所 有 软件 开发 完成 
后 ,只 开展 软件 配 剖 项 测试 或 系统 测试 ,常常 会 出 现 配 置 项 或 系统 无 法 顺利 集成 的 问题 。 同 
时 ,问题 的 定位 也 将 会 变 得 非常 困难 ,甚至 会 出 现 不 得 不 终止 测试 进行 软件 问题 定位 与 修改 
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图 5-2 软件 配置 项 结构 示意 图 


的 情况 ,浪费 大 量 的 时 间 ,进度 更 是 无 法 保证 。 另 外 .还 会 使 软件 中 遗留 不 可 预知 的 问题 ,为 
软件 的 正式 交付 运行 带 来 隐患 。 


5.2 集成 测试 原则 


为 了 有 效 地 开展 集成 测试 ,应 尽早 地 开始 集成 测试 策划 。 在 进行 集成 测试 策划 时 需要 
遵循 以 下 原则 : 

(1) 在 配置 项 集成 测试 前 应 对 软件 单元 进行 充分 的 测试 ,在 系统 集成 前 应 对 配置 项 进 
行 充分 的 测试 ; 

(2) 集成 测试 应 依据 软件 设计 文档 ,配置 项 集成 测试 应 依据 软件 概要 设计 说 明 ,系统 集 
成 测试 应 依据 系统 设计 说 明 ; 

(3) 集成 测试 应 分 层 进行 ,应 从 软件 单元 开始 集成 至 软件 配置 项 ,软件 配置 项 集成 到 子 
系统 , 子 系统 集成 到 系统 ; 

(4) 集成 测试 的 策略 选择 应 与 软件 开发 人 员 充 分 沟通 ,并 应 当 综合 考虑 体系 结构 、 质 
量 .成 本 和 进度 之 间 的 关系 ,以 确定 最 佳 的 集成 测试 策略 ; 

(5) 集成 测试 应 覆盖 所 有 接口 ; 

(6) 集成 测试 应 尽早 开始 

(7) 当 接口 修改 时 ,应 对 相关 接口 进行 回归 测试 。 


5.3 ”集成 测试 环境 


对 于 某 个 配置 项 的 集成 测试 ,集成 测试 环境 尽 可 能 使 用 目标 运行 环境 ,但 确实 存在 困难 
时 ,可 分 析 测 试 环境 与 目标 运行 环境 的 差异 .避免 软 / 硬 件 环境 的 不 一 致 导致 的 测试 结果 的 
不 可 信 。 在 配置 项 集成 测试 时 需要 开发 部 分 的 桩 模块 和 驱动 模块 ,这 些 可 能 在 单元 测试 时 
已 具备 ,测试 人 员 可 以 通过 分 析 确 定 采 用 单元 测试 的 程序 和 工具 。 

系统 测试 环境 比较 复杂 ,通常 系统 部 署 在 不 同 的 软 /硬件 平台 上 ,系统 集成 测试 需要 对 
各 个 平台 上 运行 的 软件 进行 集成 测试 。 此 时 ,往往 需要 使 用 一 些 专 用 工具 ,甚至 需要 开发 一 
些 数据 或 接口 仿真 工具 才能 完成 相应 的 测试 。 

集成 测试 环境 的 建立 可 以 从 以 下 4 个 方面 考虑 。 

(1) 硬件 环境 。 在 进行 集成 测试 时 ,应 尽 可 能 地 使 用 软件 实际 的 运行 环境 。 如 果 无 法 
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使 用 实际 的 运行 环境 ,可 以 使 用 有 效 的 仿真 环境 进行 集成 测试 。 但 是 :应 对 仿真 环境 与 实际 
运行 环境 的 差异 进行 分 析 ,确保 仿真 环境 与 实际 运行 环境 是 等 效 的 。 如 果 确 实 无 法 保证 环 
境 的 有 效 性 ,可 采用 分 析 方 法 说 明 结果 的 可 信 性 .或 者 将 部 分 测试 放 在 后 续 测试 中 执行 。 

(2) 操作 系统 环境 。 对 于 大 型 复杂 系统 来 说 ,通常 会 在 多 个 操作 系统 平台 中 运行 相应 
的 软件 。 在 进行 集成 测试 时 ,需要 充分 考虑 操作 系统 的 要 求 。 

(3) 数据 库 环 境 。 数 据 库 环境 也 十 分 的 重要 ,需要 根据 研制 任务 书 或 需求 规格 说 明 中 
描述 的 数据 库 环 境 要 求 建立 集成 测试 环境 。 这 是 因为 不 同 的 数据 库 系统 的 性 能 、 容 量 都 存 
在 不 同 , 在 集成 测试 时 尤其 要 关注 这 部 分 内 容 。 

(4) 网 络 环境 。 网 络 环境 是 影响 系统 性 能 的 关键 因素 ,因此 应 按照 研制 要 求 采 用 实际 
的 网 络 环境 进行 部 署 和 配置 。 某 系统 集成 测试 网 络 环境 示意 图 ,如 图 5-3 所 示 。 
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图 5-3 某 系统 集成 测试 网 络 环境 示意 图 


5.4 集成 测试 策略 


集成 测试 主要 采用 黑 盒 测试 技术 ,并 适当 运用 白 盒 测试 技术 。 集 成 测试 的 依据 是 软件 
设计 文档 。 

集成 测试 的 策略 有 很 多 ,例如 : 非 增 量 式 集成 和 增 量 式 集 成 、 三 明治 集成 、 核 心 系统 先 
行 集成 .分 层 集成 ,基于 功能 的 集成 ,高 频 集成 .基于 进度 的 集成 .基于 使 用 的 集成 .基于 风险 
的 集成 和 客户 /服务 器 系统 的 集成 等 。 这 些 集成 测试 策略 可 以 分 为 两 大 类 , 即 增 量 式 集成 和 
非 增 量 式 集 成 。 非 增 量 式 集成 主要 是 大 爆炸 式 集 成 , 即 按 软 件 设 计 将 软件 单元 一 次 全 部 组 
装 起 来 ,然后 进行 整体 测试 。 增 量 式 集成 包括 自 项 向 下 增 量 式 集成 、 自 底 向 上 增 量 式 集成 和 
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三 明治 集成 等 。 

两 大 类 集成 策略 的 优 缺 点 主要 有 以 下 5 个 方面 : 

(1) 增 量 式 集成 测试 需要 建立 的 测试 环境 复杂 .需要 开发 桩 模块 和 驱动 模块 ,工作 量 
较 大 ; 

(2) 增 量 式 集成 测试 发 现 的 接口 间 问 题 容易 定位 ; 

(3) 增 量 式 集成 测试 较为 充分 ; 

(4) 非 增 量 式 集成 测试 需要 的 测试 时 间 少 ,但 问题 定位 相对 较为 困难 ,往往 影响 软件 研 
制 进度 ; 

(5) 非 增 量 式 集成 测试 可 以 进行 并 行 测试 。 

在 进行 配置 项 集成 测试 和 系统 集成 测试 时 ,都 需要 选择 适合 的 集成 策略 ,因此 本 节 介 绍 
一 些 常用 的 集成 策略 ,为 了 描述 的 便捷 性 ,下 面 将 集成 测试 过 程 中 ,软件 单元 的 组 合 .配置 项 
的 组 合 统称 为 模块 ,在 某 些 描 述 中 独立 的 软件 单元 或 软件 配置 项 也 被 笼统 地 称 作 模块 ,有 关 
模块 的 划分 在 5. 6. 2 节 中 介绍 。 





5.4.1 大 爆炸 式 集成 


为 了 在 最 短 的 时 间 内 完成 集成 ,形成 完整 的 系统 ,并 且 用 最 小 的 测试 集合 来 验证 系统 的 
正确 性 ,通常 采用 一 次 性 集成 的 策略 进行 集成 和 测试 。 在 软件 研制 过 程 中 ,有 时 会 因为 时 间 
进度 或 系统 相对 较为 简单 等 原因 选择 采用 此 策略 。 


1， 集成 策略 

大 爆炸 式 集成 是 非 增 量 式 集成 . 即 一 次 性 集成 或 整体 拼装 。 该 方法 将 所 有 系统 组 成 部 
分 一 次 性 集成 完毕 .不 考虑 系统 结构 以 及 可 能 存在 的 风险 。 某 系统 组 成 和 集成 方法 示意 图 
如 图 5-4 所 示 。 
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图 5-4 大 爆炸 式 集成 方法 示意 图 


2. 优点 
大 爆炸 式 集成 测试 策略 的 优点 主要 有 : 
(1) 运用 该 策略 可 以 在 很 短 的 时 间 内 完成 集成 测试 ; 
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(2) 该 策略 需要 建立 的 集成 测试 环境 代价 较 小 ,只 在 必要 的 情况 下 开发 少量 的 驱动 模 
块 和 桩 模块 ; 

(3) 该 策略 不 需要 考虑 软件 设计 时 的 结构 ; 

(4) 集成 测试 的 测试 用 例 较 少 ; 

(5) 集成 测试 可 以 并 行进 行 ,需要 的 测试 时 间 较 少 。 


3. 缺点 

大 爆炸 式 集成 测试 策略 的 缺点 主要 有 : 

(1) 一 般 情况 下 ,无 法 一 次 就 集成 成 功 ; 

(2) 在 集成 测试 过 程 中 ,对 发 现 的 问题 进行 定位 比较 困难 ,问题 定位 一 般 耗 时 较 长 ,其 
至 有 些 无 法 复 现 和 定位 ; 

(3) 容易 遗留 错误 到 系统 中 ,造成 后 续 测 试 错误 较 多 ,同时 也 为 软件 的 交付 运行 埋 下 
隐患 。 


4. 选择 原则 

选择 该 集成 测试 策略 应 参考 如 下 原则 

(1) 系列 工程 项 目 中 的 维护 过 程 ,例如 大 型 系列 工程 项 目 除 首次 研发 以 外 的 维护 ; 

(2) 软件 规模 比较 小 ,例如 只 有 一 个 可 执行 程序 的 软件 配置 项 ; 

(3) 软件 开发 团队 较 小 ,并 使 用 集成 化 开发 平台 并 行 开发 ,并 经 常 提交 编译 、 调 试 等 , 例 
如 一 个 规模 在 2 万 行 左右 ,2 个 人 的 开发 团队 .使 用 VC++ 开发 平台 ; 

(4) 单元 测试 已 通过 了 较为 充分 的 测试 。 


5.4.2 自 项 向 下 集成 


自 项 向 下 集成 测试 策略 是 依据 软件 设计 从 顶层 模块 开始 逐步 集成 和 测试 ,最 后 形成 完 
整 的 系统 。 这 种 方法 可 以 较 早 地 对 接口 进行 验证 , 先 验证 顶层 模块 间 的 接口 ,再 逐步 验证 与 
底层 模块 ,以 及 底层 模块 间 的 接口 。 


1. 集成 策略 

自 顶 向 下 集成 是 增 量 式 集成 ,在 集成 过 程 中 可 采用 深度 优先 策略 和 广度 优先 策略 。 
图 5-4(a) 所 示 系 统 , 其 深度 优先 策略 集成 方法 如 图 5-5 所 示 , 其 广度 优先 策略 集成 方法 如 
图 5-6 所 示 ,其 中 S1、S2、S3、S4、S5 和 S6 为 集成 测试 所 需 的 桩 模块 。 

自 项 向 下 集成 测试 策略 是 按 软 件 结构 设计 自 上 而 下 进行 , 即 集成 的 顺序 是 首先 集成 主 
控 模 块 ,然后 按照 软件 控制 层次 结构 向 下 进行 集成 。 从 届 于 主 控 模块 的 模块 按 深 度 优先 策 
略 ( 纵 向 ) ,或 者 广度 优先 策略 (横向 ) 逐 步 集 成 。 深 度 优先 策略 的 集成 方式 是 首先 集成 结构 
中 的 一 个 主 控 路 径 下 的 所 有 模块 , 主 控 路 径 的 选择 是 任意 的 .一般 根据 软件 的 特点 来 确定 。 
广度 优先 策略 的 集成 方式 是 首先 沿 着 水 平方 向 :把 每 一 层 中 所 有 直接 隶属 于 上 一 层 的 模块 
集成 起 来 ,直至 最 底层 。 

自 顶 向 下 集成 策略 的 具体 步骤 如 下 。 

(1) 主 模块 作为 驱动 模块 ,所 有 与 之 直接 相关 的 模块 全 部 用 桩 模块 代替 ,对 主 模块 进行 
测试 。 若 单元 测试 时 已 进行 过 相应 测试 ,此 步骤 可 以 省 略 。 
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图 5-5 深度 优先 策略 集成 方法 示意 图 
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图 5-6 广度 优先 策略 集成 方法 示意 图 


(2) 采用 深度 优先 或 广度 优先 策略 ,用 实际 模块 替换 相应 桩 模块 , 若 该 模块 存在 下 属 模 
块 时 ,需要 用 桩 模块 替代 实际 模块 的 下 属 模块 ,集成 后 进行 测试 。 

(3) 若 集成 过 程 中 发 现 问题 ,需要 进行 相应 的 回归 测试 。 

(4) 重复 (2) 和 (3) 直 至 所 有 模块 都 集成 完毕 。 


2. 优点 

自 项 向 下 集成 测试 策略 的 优点 主要 有 : 

(1) 由 于 关键 的 控制 流程 在 较 高 层次 模块 中 ,因此 采用 此 策略 进行 集成 测试 可 较 早 地 
开展 关键 控制 流程 的 测试 ,以 便 较 早 地 发 现 关 键 控 制 流程 中 存在 的 问题 ,并 尽早 修复 关键 的 
控制 流程 错误 ; 

(2) 选用 深度 优先 集成 策略 ,可 以 验证 完整 的 软件 功能 ,可 以 先 完成 逻辑 输入 分 支 的 测 
试 ,为 后 续 主 要 处 理 流程 的 测试 提供 保证 ; 

(3) 软件 功能 可 较 早 地 得 到 验证 ,为 用 户 提供 对 软件 的 直观 了 解 ; 

(4) 不 需要 开发 驱动 模块 ; 
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(5) 由 于 这 种 方式 与 设计 顺序 一 致 ,与 设计 的 符合 性 较 好 ; 

(6) 可 以 与 设计 、 编 码 .单元 测试 等 并 行 开 展 ; 

(7) 缺陷 定位 较为 容易 ,例如 由 于 某 模块 加 入 后 ,测试 出 现 问 题 , 那 么 可 以 确定 新 加 入 
的 模块 存在 问题 ,或 者 新 加 入 的 模块 与 已 集成 的 模块 之 间 的 接口 存在 问题 。 


3. 缺点 

自 项 向 下 集成 测试 策略 的 缺点 : 

(1) 建立 集成 测试 环境 时 需要 开发 大 量 的 桩 模块 ,工作 量 较 大 ; 

(2) 高 层 模块 需要 较 好 的 可 测试 性 ; 

(3) 对 底层 模块 的 验证 较 晚 ,导致 底层 模块 的 测试 充分 性 难以 保证 。 


4. 选择 原则 

该 方法 适合 于 结构 简单 结构 化 编程 方法 的 软件 产品 。 选 择 该 集成 测试 策略 应 参考 如 
下 原则 : 

(1) 软件 控制 接口 清晰 ， 

(2) 高 层 接口 变化 较 小 ; 

(3) 底层 接口 未 定义 或 可 能 发 生变 化 ; 

(4) 控制 模块 存在 较 大 技术 风险 ,需要 尽早 开展 验证 ; 

(5) 用 户 希 望 尽早 了 解 系统 功能 。 


5.4.3 自 底 向 上 集成 


自 底 向 上 集成 测试 策略 是 从 软件 的 最 底层 模块 开始 ,按照 结构 关系 , 逐 层 向 上 集成 ,以 
此 验证 系统 。 


1. 集成 策略 

自 底 向 上 集成 是 增 量 式 集 成 , 自 底 向 上 集成 策略 是 从 软件 结构 的 最 底层 模块 开始 集成 
和 测试 ,按照 软件 结构 逐步 向 上 直至 顶层 模块 。 采 用 该 策略 进行 集成 测试 ,对 于 某 个 模块 来 
说 ,其 下 属 模块 已 完成 集成 和 测试 。 所 以 ,在 该 模块 的 测试 时 不 需要 再 开发 桩 模块 。 

自 底 向 上 集成 策略 的 具体 步骤 如 下 : 

(1) 对 软件 设计 结构 中 的 最 底层 的 模块 进行 测试 ,此 时 可 以 将 多 个 最 底层 模块 并 行进 
行 测试 ,或 者 把 只 有 一 个 最 底层 模块 的 父 模块 与 其 组 合 在 一 起 进行 测试 ; 

(2) 使 用 驱动 模块 对 上 述 步骤 中 确定 的 模块 (或 模块 组 合 ) 进 行 测试 ， 

(3) 将 完成 测试 的 模块 的 直接 上 层 模块 集成 进来 ,使 用 相应 的 驱动 模块 进行 测试 ; 

(4) 重复 上 述 步骤 ,直到 将 系统 的 最 顶层 模块 集成 进来 ,并 完成 测试 。 

5-4(a) 所 示 的 系统 .其 自 底 向 上 集成 方法 如 图 5-7 所 示 。 其 中 ,D1、D2、D3、D4、D5 和 
D6 为 集成 测试 所 需 的 驱动 模块 。 


2. 优点 

自 底 向 上 集成 测试 策略 的 优点 主要 有 : 

(1) 对 底层 模块 的 验证 可 以 较 早 地 开展 ; 

(2) 对 底层 模块 的 验证 可 以 并 行进 行 .可 以 有 效 地 提高 软件 开发 的 效率 ; 
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图 5-7 自 底 向 上 集成 方法 示意 图 


(3) 测试 中 所 需 的 驱动 模块 是 针对 测试 进行 开发 的 ,可 以 有 效 地 保证 测试 的 可 测试 性 
和 有 效 性 ; 

(4) 减少 了 桩 模块 的 开发 工作 量 ,只 需要 在 一 些 特殊 测试 要 求 时 开发 少量 的 桩 模块 ; 

(5) 缺陷 定位 也 较为 容易 。 


3. 缺点 

自 底 向 上 集成 测试 策略 的 缺点 主要 有 : 

(1) 需要 开发 驱动 模块 ; 

(2) 对 高 层 、 顶 层 模块 的 验证 较 晚 . 某 些 设计 上 的 问题 不 能 尽早 发 现 ， 

(3) 集成 到 后 期 顶层 时 ,此 时 系统 非常 复杂 ,对 底层 异常 的 覆盖 非常 困难 。 


4. 选择 原则 

该 方法 适合 于 结构 化 编程 方法 的 软件 产品 。 选 择 此 方法 集成 测试 时 应 参考 如 下 原则 : 
(1) 软件 结构 比较 简单 ; 

(2) 底层 接口 较为 稳定 ; 

(3) 高 层 接口 变化 较 频繁 ; 

(4) 底层 模块 能 够 比较 早 地 完成 开发 。 


5.4.4 三 明治 式 集成 


三 明治 式 集成 综合 了 自 项 向 下 和 自 底 向 上 集成 策略 的 优点 .将 系统 划分 为 3 层 , 中 间 层 
为 目标 层 。 集 成 测试 时 .对 3 层 分 别 进行 集成 和 测试 .最 后 再 将 3 层 集成 到 一 起 进行 测试 。 


1. 集成 策略 

三 明治 式 集成 将 系统 划分 为 3 层 ,对 上 层 采用 自 项 向 下 的 集成 策略 进行 集成 测试 ,对 下 
层 采用 自 底 向 上 的 集成 策略 进行 集成 测试 .对 中 间 层 进行 独立 的 测试 .将 中 间 层 与 下 层 集成 
和 测试 ,最 后 将 3 层 一 起 集成 并 进行 测试 。 

三 明治 式 集成 策略 的 具体 步骤 如 下 : 

(1) 对 上 层 进行 自 项 向 下 的 集成 测试 .需要 桩 模块 的 辅助 ; 
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(2) 对 下 层 进行 自 底 向 上 的 集成 测试 ,需要 驱动 模块 的 辅助 ; 
人 (3) 对 中 间 层 和 下 层 进行 集成 测试 ,需要 驱动 模块 的 辅助 ; 
(4) 将 三 层 集成 到 一 起 进行 测试 。 
图 5-4(a) 所 示 的 系统 ,将 其 分 成 上 层 、 中 间 层 和 下 层 , 三 明治 式 集成 测试 策略 如 图 5-8 


所 示 。 其 中 ,S1、S2、S3 为 上 层 测试 所 需 桩 模块 D2、D3、D4 为 下 层 测 试 所 需 的 驱动 模块 ， 
S4、S5、S6 .D1、D5 和 D6 为 中 间 层 测试 所 需 桩 模块 和 驱动 模块 。 
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图 5-8 三 明治 式 集成 方法 示意 图 


2. 优点 

三 明治 式 集成 测试 策略 的 优点 主要 有 : 

(1) 具有 自 项 向 下 和 自 底 向 上 集成 测试 策略 的 优点 ; 

(2) 能 够 并 行 地 进行 上 层 .中 间 层 和 下 层 的 测试 ,有 效 保证 测试 进度 。 

3. 缺点 

三 明治 式 集成 测试 策略 的 缺点 是 中 间 层 选取 比较 困难 。 如 果 选 择 不 恰当 ,将 造成 开发 
驱动 模块 和 桩 模块 的 工作 量 较 大 。 

4. 选择 原则 

大 部 分 软件 开发 项 目 都 适用 该 策略 。 


5.4.5 核心 系统 先行 集成 


核心 系统 先行 集成 策略 结合 了 自 项 向 下 、 自 底 向 上 和 大 爆炸 集成 测试 策略 ,此 策略 用 来 
验证 紧 耦 合 系统 。 


1. 集成 策略 
核心 系统 先行 集成 测试 策略 的 思想 是 先 对 内 核 部 分 进行 集成 测试 ,在 测试 通过 的 基础 
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上 再 按 各 外 围 模块 的 重要 程度 逐个 进行 集成 。 

核心 集成 测试 步骤 如 下 。 

(1) 对 核心 模块 进行 充分 的 测试 。 

(2) 将 核心 模块 使 用 大 爆炸 式 集成 策略 进行 一 次 性 集成 ,并 进行 测试 ,解决 集成 中 出 现 
的 各 类 问题 。 在 核心 模块 相对 较 多 的 情况 下 ,也 可 以 按照 自 底 向 上 的 步骤 进行 核心 模块 的 
集成 。 

(3) 按照 各 外 围 模块 的 重要 程度 以 及 模块 间 的 相互 制约 关系 ,确定 外 围 模 块 集成 到 核 
心 系统 中 的 顺序 。 

(4) 在 外 围 模 块 集成 到 核心 系统 之 前 ,应 对 步骤 (3) 中 确定 的 外 围 模 块 完成 集成 测试 。 

(5) 按 步 又 (3) 确 定 的 顺序 加 入 外 围 模块 .形成 最 终 的 系统 。 


2. 优点 
核心 系统 先行 集成 测试 策略 的 优点 是 对 于 快速 软件 开发 很 有 效 ,是 较 复 杂 系统 的 集成 
测试 方法 ,能 有 效 保证 重要 功能 和 服务 的 实现 。 


3. 缺点 

核心 系统 先行 集成 测试 策略 的 缺点 主要 有 : 

(1) 划分 核心 模块 和 外 围 模块 较为 困难 ; 

(2) 集成 测试 需要 开发 较 多 的 桩 模块 和 驱动 模块 ; 

(3) 由 于 对 核心 部 分 采用 大 爆炸 式 集成 策略 ,因此 存在 接口 测试 不 完整 的 可 能 性 。 


4. 选择 原则 

该 策略 适合 大 型 复杂 系统 ,适用 该 策略 的 情况 如 下 : 
(1) 具有 多 层 协 议 的 嵌入 式 系统 

(2) 操作 系统 。 





5.4.6 分 层 集成 


分 层 集成 测试 策略 是 将 具有 层次 结构 的 系统 , 先 按照 其 层次 结构 分 别 选择 恰当 的 集成 
测试 策略 ,然后 再 按照 选 定 的 集成 测试 策略 完成 所 有 层次 的 集成 测试 。 


1. 集成 策略 

分 层 集成 就 是 通过 增 量 方法 集成 测试 一 个 具有 层次 体系 结构 的 应 用 系统 。 分 层 模型 常 
用 于 通信 系统 的 集成 测试 。 这 是 因为 通信 系统 在 设计 时 就 是 按照 分 层 设计 的 。 图 5-9 所 示 
为 某 系 统 组 成 和 集成 方法 示意 图 。 

分 层 集成 测试 的 步骤 如 下 。 

(1) 按照 系统 的 分 层 设 计 . 确 定 每 个 层次 内 部 的 集成 策略 ,并 分 别 进行 集成 测试 。 层 内 
的 集成 策略 可 以 采用 自 项 向 下 、 自 底 向 上 等 方法 ,甚至 可 以 采用 非 增 量 集 成 (例如 大 爆炸 集 
成 ) 等 ; 

(2) 确定 层 间 的 集成 策略 .可 以 采用 自 项 向 下 、 自 底 向 上 等 方法 ,甚至 可 以 采用 非 增 量 
集成 等 策略 ,并 按照 层 间 的 集成 策略 进行 集成 测试 。 
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图 5-9 分 层 集 成 方法 示意 图 


2. 优点 
分 层 集成 测试 策略 的 优点 与 其 使 用 的 各 层次 集成 测试 策略 和 层 间 集成 测试 策略 的 优点 
一 致 。 


3， 缺点 
分 层 集成 测试 策略 的 缺点 与 其 使 用 的 各 层次 集成 测试 策略 和 层 间 集成 测试 策略 的 缺点 
一 致 。 


4. 选择 原则 
该 方法 适用 于 层次 结构 清晰 的 系统 。 


5.4.7 基于 功能 的 集成 


基于 功能 的 集成 属于 增 量 式 集成 方法 ,使 用 该 策略 进行 集成 测试 可 以 尽早 地 开展 系统 
关键 功能 的 验证 。 


1. 集成 策略 

在 系统 的 开发 过 程 中 ,用 户 和 开发 人 员 都 希望 尽早 地 看 到 软件 主要 功能 的 实现 与 展示 ， 
这 对 提升 用 户 和 开发 团队 的 信心 是 非常 有 益 的 。 另 外 ,还 可 以 使 用 户 尽早 地 确认 系统 的 主 
要 功能 ,避免 需求 理解 的 问题 。 基 于 功能 的 集成 策略 是 从 系统 功能 的 优先 级 出 发 ,对 集成 顺 
序 进行 定义 ,进而 实现 集成 和 测试 的 方法 。 

基于 功能 的 集成 测试 的 步骤 如 下 。 

(1) 按照 一 定 的 准则 确定 各 功能 的 优先 级 。 

(2) 分 析 与 优先 级 最 高 的 功能 相关 的 功能 .把 这 些 功 能 依次 集成 起 来 进行 测试 。 

(3) 选择 在 步骤 (2) 中 未 集成 的 下 一 个 关键 功能 ,分 析 与 其 相关 的 功能 ,把 它们 依次 集 
成 起 来 进行 测试 。 

(4) 重复 步骤 (3) .直至 所 有 模块 都 完成 集成 和 测试 。 
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2. 优点 

基于 功能 的 集成 测试 策略 的 优点 主要 有 : 

(1) 可 以 尽早 地 验证 关键 功能 的 正确 性 ; 

(2) 由 于 集成 某 些 关 键 功能 时 ,需要 同时 集成 与 其 相关 的 模块 ,因此 比 自 顶 向 下 和 自 底 
向 上 集成 策略 要 快捷 ; 

(3) 接口 测试 的 覆盖 率 较 自 顶 向 下 和 自 底 向 上 集成 测试 策略 要 低 ; 

(4) 驱动 模块 的 开发 工作 量 较 少 。 


3. 缺点 

基于 功能 的 集成 测试 策略 的 缺点 主要 有 : 

(1) 对 于 复杂 系统 ,很 难 分 析 清 楚 功能 之 间 的 相互 关系 ; 
(2) 对 相关 功能 之 间 的 接口 测试 不 充分 ; 

(3) 初始 测试 需要 使 用 较 多 的 桩 模块 ; 

(4) 元 余 测 试 较 多 。 


4. 选择 原则 

选择 该 集成 测试 策略 应 参考 如 下 原则 

(1) 系统 的 主要 功能 存在 较 大 风险 ,存在 关键 技术 需要 突破 ; 
(2) 系统 的 主要 功能 需要 尽早 参与 联 调 或 联 试 。 


5.4.8 高 频 集 成 


目前 , 越 来 越 多 的 系统 采用 迭代 式 开发 或 增 量 式 开发 模型 .采用 此 模型 的 软件 项 目 需 要 
对 每 一 次 增 量 后 所 得 到 的 系统 进行 集成 和 测试 ,以 免 最 终 获 得 的 系统 与 用 户 要 求 出 现 较 大 
偏差 。 


1. 集成 策略 

高 频 集 成 是 增 量 式 集成 。 第 一 次 是 一 个 基本 功能 集成 包 , 随 着 下 一 个 增 量 开发 的 完成 ， 
需要 集成 和 测试 增 大 后 的 系统 是 否 能 够 稳定 工作 ,功能 是 否 正确 。 如 果 在 整个 系统 完成 后 
再 实施 集成 测试 ,其 集成 和 测试 的 难度 将 非常 大 。 

高 频 集 成 测试 的 步骤 如 下 。 

(1) 开发 人 员 和 测试 人 员 同 步 进 行 代码 开发 测试 用 例 设 计 测试 软件 开发 等 。 

(2) 对 新 增 的 代码 进行 测试 。 

(3) 将 新 增 代码 集成 到 已 完成 的 集成 包 中 。 

(4) 针对 集成 后 的 测试 包 进 行 集成 测试 。 


2. 优点 

高 频 集 成 测试 策略 的 优点 主要 有 : 

(1) 开发 和 测试 同步 进行 .具有 同样 的 重要 性 ; 
(2) 能 够 较 早 地 发 现 严 重 错误 .可 避免 向 下 传递 ; 
(3) 桩 模块 不 是 必需 的 ; 
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(4) 每 次 集成 测试 后 的 系统 都 可 以 向 用 户 交付 ,通过 不 断 地 向 用 户 交付 一 定 的 功能 ,使 
开发 人 员 ,用 户 能 通过 交付 的 系统 及 时 地 进行 沟通 ,以 便 使 系统 能 够 逐步 地 向 完整 系统 
接近 。 

3. 缺点 

高 频 集成 测试 策略 的 缺点 主要 有 : 

(1) 根据 增 量 划分 的 情况 ,测试 有 时 可 能 过 于 简单 ,因此 存在 无 法 发 现 深层 次 问题 的 
情况 ; 

(2) 在 开发 .集成 的 初期 可 能 无 法 有 条 不 闪 地 集成 。 


4. 选择 原则 

该 方法 适合 于 采用 和 迭代 或 增 量 开发 模型 的 软件 项 目 。 使 用 高 频 集 成 方法 需要 具备 以 下 
条 件 : 

(1) 新 的 增 量 应 较为 稳定 ,并 且 已 完成 的 增 量 应 已 通过 验证 ; 

(2) 软件 编码 和 测试 工作 可 以 并 行进 行 ; 

(3) 需要 使 用 一 定 的 自动 化 工具 进行 测试 ; 

(4) 软件 版 本 必须 得 到 有 效 控制 ,一 般 情况 下 应 使 用 工具 完成 。 


5.4.9 基于 进度 的 集成 


进度 是 几乎 每 个 软件 开发 项 目 都 会 面 对 的 压力 。 为 了 按 进 度 完成 开发 任务 ,往往 忽略 
了 部 分 的 质量 要 求 。 基 于 进度 的 集成 就 是 试图 在 兼顾 质量 和 进度 两 者 之 间 达 到 一 种 平衡 。 


1. 集成 策略 
这 种 集成 方法 就 是 把 先 完成 的 单元 先 集成 .并 根据 情况 开发 驱动 模块 和 桩 模块 ,使 集成 
测试 尽 可 能 的 与 开发 进度 保持 一 致 . 进 而 缩短 项 目 研制 周期 。 


2. 优点 

该 方法 的 优点 在 于 开发 工作 和 集成 测试 工作 可 以 并 行进 行 ,较为 有 效 地 缩短 了 项 目 
周期 。 

3. 缺点 

基于 进度 的 集成 测试 策略 的 缺点 主要 有 : 

(1) 最 先 得 到 的 模块 可 能 相互 之 间 不 存在 关联 性 ,只 能 进行 模块 的 测试 ,导致 许多 接口 
需要 等 到 后 期 进行 测试 .此 时 系统 已 经 变 得 较为 复杂 ,无 法 有 效 地 发 现 系 统 存在 的 问题 ; 

(2) 桩 模块 和 驱动 模块 的 开发 工作 量 可 能 会 比较 大 。 

4. 选择 原则 

进度 要 求 高 于 质量 要 求 的 项 目 可 选用 此 策略 进行 集成 测试 。 


5.4.10 基于 使 用 的 集成 


基于 使 用 的 集成 测试 策略 主要 用 于 面向 对 象 方法 开发 的 系统 ,可 以 通过 类 之 间 的 使 用 
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关系 来 进行 集成 测试 。 


1. 集成 策略 

基于 使 用 的 集成 测试 策略 ,通过 从 独立 的 类 开始 集成 ,逐步 扩大 到 有 依赖 关系 的 类 ,最 
后 集成 为 完整 的 系统 。 通 过 这 样 的 方法 可 测试 类 之 间接 口 的 正确 性 。 这 种 方法 的 步骤 
如 下 。 

(1) 分 析 类 之 间 的 关联 关系 。 

(2) 根据 类 之 间 的 耦合 关系 ,首先 测试 独立 的 类 。 

(3) 测试 服务 器 类 。 

(4) 逐步 增加 具有 依赖 性 的 类 ,直到 整个 系统 被 集成 完毕 。 


2. 优点 
基于 使 用 的 集成 测试 策略 的 优点 与 自 底 向 上 测试 策略 相似 。 


3. 缺点 
基于 使 用 的 集成 测试 策略 的 缺点 与 自 底 向 上 测试 策略 相似 。 


4. 选择 原则 
使 用 面向 对 象 方法 开发 的 系统 集成 适用 该 策略 。 





5.4.11 基于 风险 的 集成 


在 软件 开发 过 程 中 为 了 尽快 地 对 高 风险 模块 进行 验证 ,可 采用 基于 风险 的 集成 测试 
策略 。 


1. 集成 策略 

基于 风险 的 集成 是 为 了 避免 系统 中 某 些 存在 高 风险 的 模块 对 系统 造成 危害 ,需要 尽早 
地 开展 这 些 模块 的 验证 .保证 系统 的 稳定 性 。 该 方法 类 似 基 于 功能 的 集成 。 

2. 优点 

基于 风险 的 集成 测试 策略 的 优点 是 风险 最 高 的 模块 优先 进行 验证 ,以 便 保 证 整个 系统 
的 有 序 集 成 。 

3. 缺点 

基于 风险 的 集成 测试 策略 的 缺点 是 需要 对 系统 中 各 模块 的 风险 有 清晰 、 准 确 地 分 析 和 
判断 。 

4. 选择 原则 

基于 风险 的 集成 测试 策略 适用 于 部 分 模块 存在 较 大 的 风险 .这 些 风险 可 能 会 影响 到 进 
度 、 对 外 接口 等 的 系统 。 


5.4.12 客户 /服务 器 系统 的 集成 


目前 ,许多 软件 系统 是 基于 客户 /服务 器 架构 实现 的 ,因此 需要 针对 此 类 软件 设计 客户 / 
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mn 服务 器 系统 的 集成 测试 策略 。 
1. 集成 策略 


在 基于 客户 /服务 器 架构 开发 的 系统 中 ,服务 器 对 客户 的 消息 做 出 响应 ,客户 对 来 自 系 
统 的 消息 做 出 反应 。 

基于 客户 /服务 器 系统 的 集成 测试 的 步骤 如 下 。 

(1) 单独 测试 客户 端 和 服务 器 端 。 

(2) 把 第 一 个 客户 端 与 服务 器 端 进行 集成 和 测试 。 

(3) 把 下 一 个 客户 端 与 步骤 (2) 完 成 的 系统 进行 集成 和 测试 。 

(4) 重复 步骤 (3) ,直到 所 有 客户 端 都 已 完成 集成 和 测试 。 


2. 优点 

基于 客户 /服务 器 系统 的 集成 测试 策略 的 优点 主要 有 : 

(1) 避免 了 大 爆炸 集成 的 风险 ; 

(2) 集成 次 序 没 有 严格 的 约束 ,可 以 结合 功能 优先 和 风险 优先 策略 进行 集成 。 


3. 缺点 
基于 客户 /服务 器 系统 的 集成 测试 策略 的 缺点 是 需要 较 大 量 的 桩 模块 和 驱动 模块 的 
开发 。 


4. 选择 原则 
该 策略 适合 基于 客户 /服务 器 架构 设计 的 系统 。 


5.5 集成 测试 内 容 


集成 测试 与 其 他 测试 级 别 不 同 ,集成 测试 重点 关注 软件 模块 之 问 是 否 能 够 协调 一 致 的 
工作 ,测试 时 需要 重点 关注 的 内 容 包括 : 

(1) 在 集成 时 模块 的 数据 是 否 丢失 ; 

(2) 模块 集成 后 是 否 能 够 协调 地 完成 定义 的 组 合 功能 ; 

(3) 一 个 模块 的 功能 是 否 对 其 他 模块 的 功能 产生 影响 ; 

(4) 全 局 数据 是 否 存在 被 异常 修改 的 问题 ; 

(5) 单个 模块 的 误差 是 否 会 被 积累 而 超出 预期 的 要 求 。 

集成 测试 常见 问题 如 下 : 

(1) 对 需 集成 的 模块 的 软件 版 本 控制 存在 问题 ; 

(2) 存在 遗漏 、 重 释 或 冲突 的 函数 ; 

(3) 文件 或 数据 库 使 用 不 正确 或 不 一 致 的 数据 结构 ; 

(4) 文件 或 数据 库 使 用 冲突 的 数据 视图 /用 法 ; 

(5) 破坏 全 局 数据 的 完整 性 ; 

(6) 客户 发 送 违反 服务 器 前 提 条 件 ,顺序 约束 的 消息 ; 

(7) 错误 参数 或 不 正确 的 参数 值 ; 

(8) 进程 和 (或 ) 线 程 之 间 冲 突 ; 
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(9) 资源 冲突 。 


5.6 测试 方法 


集成 测试 一 般 情 况 下 采用 动态 测试 的 黑 盒 测 试 方法 ,需要 根据 软件 体系 结构 设计 和 软 
件 的 特点 、 质 量 进度 要 求 等 确定 集成 测试 策略 。 

为 了 有 效 地 开展 集成 测试 ,必须 依据 软件 设计 文档 做 好 体系 结构 分 析 、 模 块 分 析 、 接 口 
分 析 、 可 测试 性 分 析 和 集成 测试 策略 分 析 。 


5.6.1 体系 结构 分 析 


体系 结构 分 析 是 进行 集成 测试 的 基础 ,集成 测试 人 员 需 要 根据 体系 结构 分 析 的 结果 来 
确定 恰当 的 集成 测试 策略 。 体 系 结构 的 分 析 应 从 以 下 两 个 方面 进行 : 

(1) 从 需求 出 发 ,划分 出 系统 或 软件 配置 项 需求 的 结构 层次 ,这 个 结构 层次 可 以 帮助 确 
定 集 成 时 的 层次 ; 

(2) 依据 软件 设计 文档 确定 模块 之 间 的 相互 关系 .以便 确定 集成 测试 的 粒度 。 


5.6.2 模块 分 析 


模块 分 析 是 集成 测试 最 重要 的 工作 之 一 。 模 块 划 分 的 好 坏 直 接 影响 集成 测试 的 工作 
量 、 质 量 和 进度 。 

一 般 模块 划分 应 从 以 下 4 个 方面 进行 考虑 : 

(1) 确定 关键 模块 ,这 里 的 关键 模块 主要 是 指 结构 关键 、 功 能 关键 或 安全 关键 模块 等 

(2) 与 某 一 模块 相关 的 其 他 模块 ,可 按 一 定 的 顺序 进行 排序 ， 

(3) 在 制定 集成 顺序 时 ,应 将 模块 间 关系 最 为 紧密 的 模块 先进 行 集成 ; 

(4) 分 析 模 块 间 的 信息 交互 是 否 容易 被 模拟 。 

集成 测试 模块 划分 的 原则 如 下 : 

(1) 模块 间 关系 紧密 的 可 作为 一 个 模块 进行 集成 ; 

(2) 与 外 围 模块 间 的 关系 简单 、 松 散 ; 

(3) 需要 建立 的 桩 模块 和 驱动 模块 简单 ,便于 构造 。 

为 了 提高 集成 测试 的 效率 ,应 根据 一 定 的 原则 识别 关键 模块 。 关 键 模块 的 特征 主要 包 
括 如 下 5 个 方面 : 

(1) 和 多 个 软件 需求 有 关 :或 与 关键 功能 相关 ; 

(2) 处 于 控制 结构 的 顶层 ; 

(3) 模块 复杂 或 容易 出 现 错误 ; 

(4) 含有 关键 的 性 能 需求 ; 

(5) 被 频繁 使 用 的 模块 。 

关键 模块 分 析 的 方法 如 下 : 


软件 测试 实用 方法 与 技术 


(1) 与 开发 人 员 交流 ,获得 关键 模块 的 信息 ; 

(2) 通过 静态 分 析 工具 来 进行 分 析 , 寻 找 高 内 聚 、. 频 繁 使 用 的 模块 ,或 处 于 控制 顶层 的 
模块 ; 

(3) 依据 需求 跟踪 矩阵 来 识别 关键 需求 所 对 应 的 关键 模块 ; 

(4) 对 于 维护 性 项 目 可 以 根据 历史 数据 进行 分 析 , 包 括 : 变更 的 影响 .缺陷 高 密度 
处 等 ; 

(5) 对 于 新 研 项 目 可 以 通过 文档 审查 .代码 审查 和 代码 走 查 来 确定 高 风险 模块 。 


5.6.3 接口 分 析 


集成 测试 关注 的 重点 是 接口 的 正确 性 ` 安 全 性 完整 性 和 稳定 性 等 。 因 此 ,应 对 模块 间 
的 接口 进行 详细 地 分 析 , 以 便 保证 接口 测试 的 充分 性 。 分 析 的 内 容 应 包括 : 接口 划分 、 接 口 
分 类 和 通过 接口 的 数据 分 析 等 。 


1. 接口 的 划分 

接口 的 划分 应 根据 软件 设计 文档 开展 ,具体 的 步骤 如 下 : 

(1) 根据 模块 划分 的 结果 确定 模块 的 内 部 接口 和 外 部 接口 ; 

(2) 确定 软件 配置 项 的 外 部 接口 (包括 与 硬件 的 接口 ); 

(3) 确定 子 系统 的 外 部 接口 (包括 与 硬件 的 接口 ); 

(4) 确定 系统 的 外 部 接口 (包括 与 硬件 、 操 作 系统 和 第 三 方 软件 的 接口 ) 。 


2. 接口 分 类 

接口 的 类 型 可 以 分 为 两 大 类 : 

(1) 系统 内 部 接口 , 指 系统 内 部 各 模块 之 间 的 接口 ,这 类 接口 是 集成 测试 的 重点 ; 

(2) 系统 外 部 接口 , 指 系统 与 外 部 系统 的 接口 .包括 人 硬件 和 软件 的 接口 或 操作 界面 ， 
这 类 接口 一 般 在 系统 测试 时 完成 。 

对 于 内 部 接口 可 分 为 : 

(1) 函数 接口 ,模块 间 通过 函数 的 调用 来 进行 交互 ; 

(2) 消息 接口 ,消息 接口 常用 在 面向 对 象 系统 和 嵌入 式 系统 ,使 用 这 种 接口 时 ,软件 模 
块 间 不 直接 发 生 联系 ,而 是 通过 消息 进行 交互 ; 

(3) 类 接口 ,类 接口 用 在 面向 对 象 系统 .类 接口 一 般 通 过 继承 、 参 数 类 不 同类 方法 调用 
等 方式 实现 交互 ; 

(4) 其 他 接口 ,包括 全 局 变量 .配置 文件 .中 断 .数据 库 等 。 


3. 接口 数据 分 析 

接口 数据 分 析 就 是 要 分 析 通 过 接口 的 数据 。 通 过 对 接口 数据 的 分 析 可 设计 相应 的 测试 
用 例 。 对 不 同 的 接口 类 型 ,其 分 析 方 法 也 存在 差异 .如 : 

(1) 函数 接口 .对 于 函数 接口 需要 关注 函数 的 参数 个 数 、 参 数 类 型 .参数 顺序 、 参 数 等 从 
类 ,参数 的 边界 等 情况 ; 

(2) 消息 接口 .对 于 消息 接口 需要 分 析 消 息 的 类 型 .消息 的 域 . 域 的 属性 、 域 的 取 值 范 
围 、 可 能 的 异常 值 等 情况 ; 
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(3) 类 接口 ,对 于 类 接口 需要 分 析 类 的 属性 ,应 重点 关注 公共 属性 和 保护 属性 ,必要 时 
需要 对 私有 属性 进行 分 析 , 应 关注 属性 的 等 价 类 和 边界 值 ; 

(4) 其 他 接口 .对 于 其 他 接口 要 分 析 其 读 写 属性 、 并 发 性 、 等 价 类 和 边界 值 ,对 于 配置 文 
件 这 类 接口 还 需要 重点 关注 数据 变化 组 合 的 情况 。 





5.6.4 可 测试 性 分 析 


随 着 软件 工程 技术 的 发 展 , 可 测试 性 需求 在 软件 需求 分 析 阶 段 已 作为 软件 的 需求 被 分 
析 和 提出 ,并 随 着 项 目的 进展 被 设计 和 实现 。 尽 早 地 进行 可 测试 性 分 析 对 集成 测试 以 及 后 
续 的 系统 测试 都 是 非常 必要 的 。 

对 于 集成 测试 的 可 测试 性 分 析 重 点 在 于 接口 方面 的 可 测试 性 分 析 。 若 在 早期 不 进行 可 
测试 性 分 析 ,可 能 导致 需要 开发 大 量 的 接口 测试 程序 。 


5.6.5 集成 测试 策略 分 析 


集成 测试 策略 分 析 是 需要 根据 被 测 软件 的 具体 情况 选择 合适 的 集成 策略 。 在 5. 4 节 中 
介绍 了 很 多 集成 测试 策略 ,在 实际 应 用 时 ,需要 根据 体系 结构 分 析 、 模 块 分 析 、 接 口 分 析 、 可 
测试 性 分 析 、 风 险 分 析 、 人 力 资源 分 析 、 测 试 环 境 分 析 以 及 进度 要 求 综合 选择 测试 策略 。 在 
实际 的 软件 研制 项 目 中 .一 般 采 用 多 种 策略 相 结 合 的 方式 进行 集成 测试 。 

确定 集成 测试 策略 时 需要 从 以 下 两 个 方面 考虑 : 

(1) 能 够 实现 较为 充分 的 测试 ,特别 是 关键 模块 ; 

(2) 能 够 将 模块 与 接口 进行 清晰 地 划分 :能够 使 集成 测试 的 工作 量 尽 可 能 少 。 


5.7 集成 测试 用 例 设计 


集成 测试 是 根据 系统 的 体系 结构 ,通过 集成 测试 分 析 ,确定 集成 测试 的 策略 。 集 成 测试 
用 例 设 计 需 要 针对 集成 测试 的 目的 ,设计 有 效 的 测试 用 例 , 以 便 保 证 通过 集成 测试 后 的 系统 
能 够 协调 一 致 地 进行 工作 。 

集成 测试 用 例 设计 可 以 从 以 下 两 个 方面 考虑 。 

(1) 设计 正常 测试 用 例 。 集 成 测试 较为 关键 的 内 容 是 验证 软件 能 够 协调 一 致 地 完成 各 
项 功能 ,性 能 等 。 因 此 .测试 用 例 设计 时 .应 依据 软件 概要 设计 中 描述 的 主要 功能 和 接口 要 
求 , 使 用 等 价 类 方法 设计 测试 用 例 。 同 时 .应 根据 输入 域 输出 域 .状态 转换 设计 有 针对 性 的 
测试 用 例 。 

(2) 设计 异常 测试 用 例 。 根 据 集 成 测试 关注 的 内 容 , 异 常 测试 通常 包括 : 接口 是 否 存 
在 遗漏 、 接 口 格式 是 否 存在 错误 和 对 接口 数据 异常 是 否 能 够 进行 必要 的 处 理 等 。 常 用 的 测 
试用 例 设计 方法 包括 : 猜 错 法 、 基 于 风险 的 测试 .基于 故障 的 测试 .边界 测试 ,特殊 值 测试 、 
状态 转换 测试 。 

集成 测试 是 整个 软件 研制 过 程 中 的 一 个 环节 .是 所 有 测试 活动 的 一 部 分 ,需要 根据 成 
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本 、 进 度 和 质量 3 个 因素 综合 考虑 。 集 成 测试 需要 突出 其 特点 ,通常 情况 下 应 覆盖 所 有 的 
接口 。 


5.8 集成 测试 过 程 


集成 测试 依据 软件 设计 文档 ,按照 如 图 5-10 所 示 的 过 程 开 展 测试 ,集成 测试 过 程 分 为 


4 个 阶段 。 
测试 策划 多 (a) 


测试 策划 集成 测试 计划 


测试 用 例 设计 (a) 集成 测试 说 明 





测试 设计 与 实现 








测试 环境 准备 村 成 轴 氏 全 统 
ey (=) 人 
人 集成 测试 问题 报告 





测试 总 结 集成 测试 报告 


图 5-10 ”集成 测试 过 程 


(1) 集成 测试 策划 。 依 据 软 件 设计 文档 进行 集成 测试 策划 ,制定 集成 测试 计划 。 

(2) 集成 测试 设计 与 实现 。 依 据 软件 设计 文档 、 集 成 测试 计划 设计 集成 测试 用 例 ,开发 
必要 的 集成 测试 桩 模块 和 驱动 模块 。 

(3) 集成 测试 执行 。 按 照 集 成 测试 计划 、 测 试 说 明 中 明确 的 测试 策略 .测试 环境 ,逐步 
集成 并 执行 相应 的 集成 测试 用 例 ,记录 实 测 结果 和 测试 过 程 出 现 的 问题 。 当 软件 问题 修改 
后 还 需要 进行 回归 测试 。 

(4) 集成 测试 总 结 。 根 据 实测 结果 、 期 望 结果 和 评估 准则 分 析 测 试 数据 ,形成 测试 报 
告 。 测 试 报告 完成 后 ,应 对 整个 集成 测试 的 情况 .文档 等 进行 评审 ,以 确保 集成 测试 有 效 
执行 。 
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5.8.1 测试 策划 


为 了 保证 软件 研制 进度 ,一 般 情况 下 可 在 软件 设计 完成 后 即 开展 软件 集成 测试 策划 、 测 
试 设计 与 实现 工作 ,完成 集成 测试 策划 工作 时 应 编写 软件 集成 测试 计划 。 

目前 ,软件 研制 项 目 在 集成 测试 方面 还 存在 着 许多 问题 。 主 要 表现 在 以 下 3 个 方面 。 

(1) 对 集成 测试 的 重要 性 认识 不 足 。 

(2) 集成 测试 开始 较 晚 。 大 部 分 由 于 资源 限制 或 集成 测试 策略 不 恰当 ,在 整个 项 目 编 
码 和 单元 测试 结束 后 才 开始 进行 集成 测试 。 而 没有 根据 软件 具体 情况 ,尽早 开展 集成 测试 
策划 ,选择 适合 的 集成 测试 策略 ,分 步 又、 分 阶段 地 进行 集成 测试 。 

(3) 集成 测试 用 例 设计 不 够 全 面 。 大 部 分 问题 主要 表现 在 ,只 关注 了 集成 后 的 软件 功 
能 ,未 充分 覆盖 软件 接口 。 另 外 ,很 少 考虑 异常 情况 的 测试 。 

为 了 实现 质量 .进度 .效率 的 平衡 ,应 在 集成 测试 策划 时 考虑 如 下 因素 : 

(1) 软件 的 质量 要 求 ; 

(2) 软件 研制 的 进度 安排 ; 

(3) 软件 模块 的 优先 级 ; 

(4) 软件 接口 的 优先 级 ; 

(5) 测试 资源 的 限制 。 

集成 测试 策划 的 内 容 包括 : 

(1) 按照 软件 设计 和 软件 质量 要 求 确定 软件 集成 测试 的 要 求 。 包 括 : 

@ 确定 需要 进行 集成 的 软件 单元 或 配置 项 的 名 称 、 标 识 ; 

@ 明确 集成 测试 策略 ,包括 采取 的 集成 策略 和 集成 顺序 

@ 明确 每 一 次 集成 后 需要 测试 的 内 容 ; 

@ 提出 每 次 集成 后 的 测试 方法 ; 

@ 提出 集成 测试 的 充分 性 要 求 ; 

@ 测试 终止 条 件 ; 

@ 优先 级 ; 

@ 对 软件 设计 文档 的 追踪 关系 。 

下 面 给 出 一 个 软件 配置 项 集成 测试 策略 的 示例 : 


软件 的 结构 图 如 下 。 该 软件 分 为 4 个 模块 ,各 模块 的 组 成 如 下 表 所 示 。 
用 户 操作 GenericFrame 下 和 和 人 


生成 数据 ， GenericData 村 
浏览 及 发 送 Transmitor 模 块 人 




















定制 捕获 条 
下 件 ， 装 配 数 
据 ， 发送 


软件 结构 图 
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序号 | 模块 名 称 及 标识 所 包含 的 类 的 标识 


FrameStruct、DataField 、IDataPolicy、TimelInDay、BcdTime、JsData、 
GradualData 一 T 二、ByteGradual .UshortGradual .ShortGradual 、 





Generic Frame 


Creator UintGradual、 IntGradual 、FloatDividual 、DoubleDividual 、FixedData、 
JsData .RandomData .DataFieldFactory .DataPolicyFactory 
eEndian, FieldCategory Attribute .NodeElementName ,IDataGenerator 、 
Generic Data- BinaryFile ,LineDataFile .FixedData .RandomData .RandomDataFixedLength 、 


Transmitor TInputData InputTime, InputFixed ,InputInteger InputDecimal 、 


InputDate , InputRandom 


eDecoratePosition、 DecoraterFactory、 FieldDecorater、 UbyteDecorator、 
SbyteDecorator, UshortDecorator ,ShortDecorator ,UintDecorator 、 
IntDecorator ,UlongDecorator .LongDecorator 


3 Generic Data Policy 





INetServicer. TcpServer .UdpMulticastReceiver .UdpMulticastSender、 
TepClientProc 、IpPacket、TepPacket 、UdpPacket、IpProtocol 、IpVersion、 
RawSocket、JCapturer、 RawIpCapturer、 IPacketParsor、 RawIpPacketParsor、 
TPacketFilter .MultiMediaTimer, HiPerfCounter 


4 Custom Capture 








进行 集成 测试 时 ,采用 自 底 向 上 的 集成 顺序 ,具体 策略 如 下 。 

@ 将 4 个 模块 独立 集成 并 进行 测试 ,集成 策略 采用 大 爆炸 方式 。 

回 考虑 模块 间 的 相关 性 和 测试 的 便捷 性 。 首 先 ,将 模块 1 与 模块 2 进行 集成 。 具 
体 方法 是 由 模块 1 生成 自 定 义 数 据 帧 格式 文件 ,然后 由 模块 2 读 取 数据 帧 格式 定义 文 
件 , 生 成 数据 后 发 送 。 

@ 集成 模块 3。 由 模块 1 生成 自 定 义 数据 帧 格式 文件 ,接着 由 模块 3 读 取 数 据 帧 格 
式 定义 文件 ,对 数据 帧 中 定义 中 的 每 个 字段 进行 前 组 和 后 缓 的 修饰 ,生成 带 字 段 修饰 的 
文件 ,最 后 由 模块 2 读 取 并 生成 数据 发 送 。 

@ 集成 模块 4 并 进行 测试 。 

在 测试 用 例 和 测试 数据 设计 方面 ,采用 等 价 类 划分 、 边 界 值 分 析 、 猜 错 等 方法 ,设计 
包括 正常 值 . 异 常 值 .边界 值 等 在 内 的 测试 用 例 和 测试 数据 ,达到 对 软件 功能 .性 能 、 接 
口 的 全 覆盖 。 

根据 被 测 软件 的 特点 ,被 测 软件 在 仿真 环境 中 运行 ,测试 时 通过 网 络 输 入 正常 测试 
数据 和 异常 测试 数据 ,同时 捕获 输出 结果 ,并 进行 分 析 。 








(2) 提出 集成 测试 环境 要 求 , 包 括 测试 所 需 的 桩 模块 和 驱动 模块 等 。 

(3) 提出 集成 测试 人 员 安排 。 

(4) 安排 集成 测试 的 进度 计划 。 应 依据 测试 需求 .测试 环境 、 测 试 人 员 等 情况 ,制定 合 
理 可 行 的 软件 集成 测试 进度 计划 。 

(5) 制定 集成 测试 通过 的 准则 。 集 成 测试 通过 的 准则 示例 如 下 : 

Q@ 集成 后 的 软件 功能 与 设计 一 致 ; 

@ 接口 与 设计 一 致 ， 

@ 集成 测试 发 现 的 问题 得 到 修改 并 通过 回归 测试 ; 

@ 满足 集成 测试 终止 条 件 ; 
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@@ 集成 测试 报告 通过 评审 。 

集成 测试 策划 完成 时 ,应 编写 软件 集成 测试 计划 。 集 成 测试 计划 是 否 合理 可 行 、 是 否 满 
足 充 分 性 要 求 是 十 分 值得 关注 的 ,因此 应 对 软件 集成 测试 计划 进行 评审 。 评 审 的 主要 内 容 
包括 : 

(1) 测试 人 员 组 成 合理 、 分 工 明确 

(2) 明确 集成 测试 策略 ,集成 测试 策略 恰当 ; 

(3) 集成 测试 方法 可 行 ; 

(4) 测试 通过 的 准则 满足 软件 质量 、 进 度 要 求 ; 

(5) 根据 研制 任务 书 、 软 件 设计 文档 和 其 他 软件 质量 要 求 明确 需要 进行 测试 的 软件 功 
能 ,性 能 和 接口 ; 

(6) 测试 资源 满足 集成 测试 需求 。 





5.8.2 测试 设计 与 实现 


集成 测试 设计 与 实现 阶段 的 主要 工作 是 依据 软件 设计 文档 和 集成 测试 计划 ,进行 集成 
测试 用 例 的 设计 ,并 完成 必要 的 集成 测试 环境 的 建立 和 验证 。 集 成 测试 设计 与 实现 阶段 完 
成 时 应 编写 集成 测试 说 明 ,以 及 集成 测试 所 需 测试 环境 和 测试 环境 验证 报告 。 

集成 测试 与 后 续 介 绍 的 配置 项 测试 和 系统 测试 的 区 别 在 于 软件 测试 是 在 集成 的 同时 完 
成 测试 工作 的 。 因 此 ,需要 对 软件 的 结构 .软件 研制 的 进度 等 有 充分 的 了 解 ,在 此 基础 上 , 根 
据 质 量 和 进度 要 求 制 定 可 行 的 集成 顺序 和 测试 执行 顺序 ,这 些 都 是 影响 软件 集成 测试 用 例 
设计 的 重要 因素 。 

根据 作者 的 经 验 , 对 于 只 有 一 个 配置 项 的 较 小 规模 的 软件 , 若 开 发 人 员 较 少 ,并 基于 一 
个 开发 平台 进行 开发 时 ,可 采用 在 充分 的 单元 测试 基础 上 ,一 次 集成 后 直接 进行 配置 项 
测试 。 


1. 设计 集成 测试 用 例 

在 进行 集成 测试 用 例 设计 时 应 遵循 如 下 原则 : 

(1) 所 有 公共 的 接口 都 应 有 正常 和 异常 的 测试 用 例 ; 

(2) 每 一 步 集 成 后 都 应 对 集成 后 的 模块 进行 功能 、 性 能 测试 ; 
(3) 集成 测试 接口 覆盖 率 应 达到 100%; 

(4) 接口 测试 用 例 应 覆盖 所 有 接口 格式 测试 ; 

(5) 接口 测试 用 例 应 覆盖 对 数据 异常 情况 的 测试 。 


2. 建立 集成 测试 环境 

集成 测试 时 往往 会 遇 到 目标 运行 环境 还 不 完备 的 情况 ,甚至 存在 部 分 待 集成 的 模块 未 
开发 完成 的 情况 ,这 些 都 将 影响 到 后 续 软 件 的 集成 。 因 此 ,建立 集成 测试 环境 时 ,需要 考虑 
这 些 风险 ,尽早 制定 缓解 措施 和 应 急 计划 ,以 保证 顺利 地 开展 集成 和 测试 工作 。 

如 果 在 条 件 允 许 的 情况 下 .集成 测试 环境 应 尽 可 能 使 用 目标 运行 环境 以 保证 测试 的 有 
效 性 。 若 确实 无 法 使 用 真实 环境 ,建立 的 仿真 环境 需要 经 过 认真 地 分 析 和 确认 ,保证 与 真实 
环境 的 等 效 性 。 
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3. 测试 就 绪 评审 

为 了 保证 集成 测试 的 充分 性 需要 对 集成 测试 计划 ,说 明和 测试 环境 就 绪 情 况 进 行 评审 ， 
评审 的 内 容 包 括 : 

(1) 集成 测试 策略 和 集成 顺序 是 否 恰当 ; 

(2) 每 次 集成 后 测试 类 型 和 测试 项 是 否 充 分 ; 

(3) 测试 项 是 否 包括 了 测试 终止 要 求 ; 

(4) 是 否 充分 考虑 了 集成 测试 可 能 的 风险 .其 缓解 和 应 急 计 划 是 否 恰当 ; 

(5) 测试 说 明 是 否 完整 正确 和 规范 ; 

(6) 测试 设计 是 否 完整 和 合理 ; 

(7) 测试 用 例 是 否 可 行 和 充分 ; 

(8) 通过 比较 测试 环境 与 软件 真实 运行 的 软件 和 硬件 环境 的 差异 ,审查 测试 环境 要 求 
是 否 正确 合理 、 满 足 测试 要 求 ; 

(9) 文档 是 否 符合 规范 。 


5.8.3 测试 执行 


集成 测试 执行 活动 是 依据 集成 测试 计划 、 测 试 说 明 按 集成 顺序 进行 集成 和 测试 ,记录 实 
际 的 测试 结果 。 当 发 现 问 题 时 应 进行 分 析 , 如 果 是 测试 的 问题 应 根据 实际 情况 调整 测试 计 
划 和 说 明 ,补充 相应 的 测试 用 例 ; 如 果 是 软件 的 问题 应 如 实 、 详 细 地 记录 测试 结果 ,并 提交 问 
题 报告 。 问 题 报告 中 应 详细 描述 问题 现象 ,分 析 问 题 类 型 和 级 别 ,给 出 改进 意见 建议 ,为 后 
续 的 问题 定位 和 解决 提供 支持 。 

如 果 软 件 进行 了 更 改 ,不 论 是 对 集成 测试 中 发 现 问题 进行 的 更 改 , 还 是 软件 接口 方面 的 
更 改 都 应 进行 相应 的 回归 测试 。 回 归 测 试 的 详细 内 容 参 见 后 续 章 节 的 介绍 。 


s.8.4 测试 总 结 


集成 测试 完成 后 应 对 集成 测试 工作 进行 总 结 ,以 便 评估 集成 测试 中 的 问题 是 否 得 到 有 
效 解决 ,集成 测试 工作 是 否 满足 充分 性 要 求 。 测 试 结果 分 析 总 结 应 写 入 软件 测试 报告 ,并 应 
进行 测试 报告 评审 。 

1. 集成 测试 结果 分 析 总 结 

集成 测试 结果 分 析 总 结 的 内 容 包 括 以 下 4 点 。 

(1) 对 集成 测试 过 程 进 行 总 结 。 应 对 集成 测试 策划 、 集 成 测试 设计 与 实现 、 集 成 测试 执 
行 过 程 进行 总 结 , 说 明 在 各 过 程 中 开展 的 主要 工作 、 参 与 人 员 和 工作 完成 情况 。 

(2) 对 集成 测试 方法 进行 说 明 。 应 说 明 集成 测试 所 采用 的 测试 方法 与 策略 ,并 说 明 采 
用 这 些 方法 的 依据 。 

(3) 对 集成 测试 环境 进行 分 析 。 应 说 明 集成 测试 所 使 用 的 测试 环境 ,包括 测试 工具 、 桩 
模块 和 驱动 模块 的 使 用 情况 ,并 对 测试 环境 的 差异 性 进行 分 析 : 说 明 测试 环境 是 否 满足 集成 
测试 的 要 求 。 
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(4) 对 集成 测试 结果 进行 分 析 。 集 成 测试 结果 的 分 析 应 包括 对 测试 执行 过 程 以 及 所 有 
回归 测试 的 情况 的 分 析 。 主 要 内 容 包 括 : 

@ 测试 时 间 ; 

四 测试 人 员 ; 

@ 测试 用 例 执行 情况 .内 容 包 括 测试 用 例 数 、 通 过 的 测试 用 例 、 未 通过 的 测试 用 例 、 完 
全 执行 的 测试 用 例 、 未 完全 执行 的 测试 用 例 、 未 执行 的 测试 用 例 ; 

@ 测试 覆盖 情况 ,包括 对 功能 、 性 能 ,接口 等 覆盖 情况 .说明 是 否 满足 测试 充分 性 要 求 ; 

@ 说 明 集成 测试 过 程 中 发 现 的 问题 ,并 对 问题 解决 情况 进行 说 明 ; 

@ 如 果 有 遗留 问题 应 说 明 可 能 的 解决 措施 ; 

@ 对 软件 的 整体 情况 进行 评价 ,并 提出 改进 的 意见 及 建议 。 


2. 集成 测试 总 结 评审 

集成 测试 总 结 评审 的 内 容 包 括 : 

(1) 审查 测试 文档 与 记录 内 容 的 完整 性 、 正 确 性 和 规范 性 ; 

(2) 审查 测试 活动 的 有 效 性 ; 

(3) 审查 测试 环境 是 否 符合 测试 要 求 ， 

(4) 审查 软件 测试 报告 与 软件 测试 原始 记录 和 问题 报告 的 一 致 性 ; 

(5) 审查 实际 测试 过 程 与 测试 计划 和 测试 说 明 的 一 致 性 ; 

(6) 审查 测试 说 明 评审 的 有 效 性 ,例如 是 否 评审 了 测试 项 选择 的 完整 性 和 合理 性 、 测 试 
用 例 的 可 行 性 和 充分 性 ; 

(7) 审查 测试 结果 的 真实 性 和 准确 性 ; 

(8) 审查 如 果 存 在 遗留 问题 ,是 否 有 处 理 措 施 。 





CHAPTER 6 





配置 项 测试 


软件 配置 项 测试 是 在 软件 配 署 项 集成 测试 的 基础 上 进行 的 ,软件 配置 项 集成 测试 完成 
了 软件 单元 到 配置 项 的 集成 测试 。 一 般 情 况 下 ,软件 配置 项 测试 可 作为 软件 确认 测试 进行 。 
软件 配置 项 测试 根据 软件 配 团 项 的 研制 任务 书 、 软 件 需求 规格 说 明 . 用 户 手 册 等 进行 测试 ， 
确保 软件 配置 项 满足 用 户 的 要 求 , 符 合 软件 需求 规格 说 明 中 定义 的 各 项 需求 ,同时 ,审查 软 
件 研 制 任务 书 、 软 件 需 求 规格 说 明 .软件 实体 、 软 件 用 户 手 册 是 否 一 致 。 


6.1 概述 


6.1.1 配置 项 测试 的 定义 


软件 配置 项 测试 的 对 象 是 软件 配置 项 。 根 据 GJB 2786A 一 2009 ,软件 配置 项 是 满足 最 
终 使 用 要 求 并 由 需 方 指定 进行 单独 配置 管理 的 软件 集合 。 计 算 机 软件 配置 项 的 选择 基于 对 
下 列 因素 的 权衡 : 软件 功能 ,规模 、 宿 主机 或 目标 计算 机 、 开 发 方 ,保障 方案 .重用 计划 ,关键 
性 ,接口 考虑 ,需要 单独 编写 文档 和 控制 以 及 其 他 因素 。 

配置 项 测试 一 般 情况 下 ,应 依据 软件 研制 任务 书 、 需 求 规格 说 明 、 接 口 需求 规格 说 明和 
用 户 手 册 开 展 功 能 、 性 能 、 接 口 .安装 .人 机 交互 界面 测试 等 。 必 要 时 ,可 包括 文档 审查 .代码 
审查 .静态 分 析 、` 浊 辑 测试 ,强度 测试 ` 余 量 测试 . 安 全 性 测试 ,恢复 性 测试 ,边界 测试 、 数 据 处 
理 测试 和 容量 测试 等 。 


6.1.2 配置 项 测试 的 目的 


软件 配置 项 测试 的 目的 主要 包括 : 

(1) 确认 该 软件 配置 项 是 否 达到 了 软件 研制 任务 书 、 软 件 需求 规格 说 明 、 软 件 接口 需求 
规格 说 明 等 规定 的 各 项 要 求 ; 

(2) 确定 是 否 可 以 进行 软件 配 管 项 验收 交付 和 参加 后 续 的 系统 集成 测试 。 

软件 研制 方 应 根据 软件 研制 任务 书 和 软件 需求 规格 说 明 中 定义 的 全 部 需求 及 软件 配置 
项 测试 计划 ,开展 软件 配置 项 测试 工作 。 

软件 配置 项 测试 与 软件 集成 测试 的 区 别 见 5. 1. 2 节 中 的 说 明 。 
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软件 配置 项 与 单元 测试 存在 较为 明显 的 差别 ,主要 表现 在 以 下 5 个 方面 。 

(1) 测试 对 象 不 同 。 配 置 项 测试 的 对 象 是 软件 配置 项 ,而 单元 测试 的 对 象 是 软件 单元 。 

(2) 测试 的 依据 不 同 。 配 置 项 测试 的 测试 依据 是 软件 研制 任务 书 和 (或 ) 需 求 规格 说 
明 、 接 口 需 求 规格 说 明和 用 户 手 册 , 而 软件 单元 测试 的 测试 依据 是 软件 设计 文档 。 

(3) 测试 环境 不 同 。 单 元 测试 在 开发 环境 下 进行 即 可 ,同时 需要 建立 桩 模块 和 驱动 模 
块 ; 而 配置 项 测试 一 般 情 况 下 ,需要 在 目标 环境 下 进行 ,并 且 需 要 开发 相应 的 仿真 程序 和 数 
据 捕获 程序 。 

(4) 测试 策略 不 同 。 软 件 单元 测试 需要 根据 软件 设计 建立 相应 的 测试 策略 ,而 软件 配 
置 项 测试 则 一 般 采 用 黑 盒 测 试 方法 。 

(5) 测试 内 容 存在 差异 。 软 件 单元 测试 重点 关注 的 是 软件 单元 完成 的 功能 ,而 配置 项 
测试 则 需要 从 软件 的 方方面面 考察 软件 研制 任务 书 和 (或 ) 软 件 需求 规格 说 明 中 描述 的 功 
能 性能、 接口 (配置 项 外 部 接口 )` 安 全 性 ,恢复 性 和 安装 性 等 是 否 符合 要 求 。 


6.1.3 配置 项 测试 的 重要 性 


在 大 型 工程 任务 中 ,软件 配置 项 作为 研制 活动 管理 的 基本 单元 ,从 软件 开发 管理 到 技术 
活动 的 开展 都 以 此 为 基础 。 因 此 ,软件 配置 项 测试 在 整个 软件 生命 周期 模型 中 发 挥 着 非常 
重要 的 作用 。 突 出 表现 在 以 下 5 个 方面 。 

(1) 第 一 次 完整 地 提交 软件 各 项 需求 的 实现 。 

(2) 通过 配置 项 测试 可 以 发 现 软件 是 否 遗 漏 了 软件 研制 任务 书 和 (或 ) 软 件 需求 规格 说 
明 中 的 需求 。 

(3) 配 辕 项 测试 期 间 软 件 用 户 会 以 不 同 的 形式 参与 ,例如 测试 就 绪 评 审 、 测 试 执行 等 。 
可 以 通过 配置 项 测试 ,使 用 户 对 软件 完成 的 功能 .性 能 等 进行 确认 ,保证 软件 交付 的 顺利 
进行 。 

(4) 配 辕 项 测试 更 多 地 关心 软件 实现 各 项 需求 的 外 在 表现 , 即 用 户 的 期 望 。 因 此 ,配置 
项 测试 可 以 发 现 与 其 他 配 辕 项 的 接口 \ 用 户 使 用 界面 .性 能 安全 性 .安装 性 等 与 用 户 直 接 相 
关 的 问题 。 避 免 在 交付 后 ,或 参与 系统 集成 时 出 现 大 量 问题 ,造成 进度 .成 本 和 质量 方面 的 
重大 问题 。 

(5) 配 蜀 项 测试 环境 较 系 统 测 试 环境 容易 建立 。 由 于 配置 项 测试 和 系统 测试 都 需要 尽 
可 能 地 在 目标 环境 下 进行 ,因此 对 单一 的 配置 项 测试 环境 而 言 比 较 容易 实现 。 而 整个 系统 
涉及 的 各 种 软 /硬件 平台 较为 复杂 ,难以 保证 ,往往 到 研制 阶段 后 期 才能 到 位 ,因此 可 通过 配 
管 项 测试 较 早 的 在 目标 环境 下 确认 部 分 系统 的 功能 、 性 能 等 。 


6.2 配置 项 测试 原则 


为 保证 软件 配置 项 测试 充分 和 有 效 , 在 进行 软件 配 团 项 测试 时 .应 遵循 以 下 原则 : 
(1) 软件 配置 项 测试 的 依据 是 软件 需求 规格 说 明和 (或 ) 软 件 研制 任务 书 , 需 要 时 还 应 
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包括 接口 需求 规格 说 明和 软件 用 户 手册 ,后 续 描 述 中 将 配置 项 测试 依据 统称 为 软件 需求 ; 

(2) 应 逐 项 测试 软件 需求 规定 的 软件 配置 项 的 功能 性能、 接口 等 所 有 功能 和 非 功能 
需求 ; 

(3) 测试 软件 需求 覆盖 率 应 达到 100% ,如 果 存 在 无 法 覆盖 的 情况 ,应 说 明 原 因 , 并 制定 
后 续 处 理 的 措施 ; 

(4) 必要 时 ,在 高 层 控制 流 图 中 作 结构 覆盖 测试 ; 

(5) 软件 配置 项 测试 的 环境 应 尽 可 能 与 软件 目标 环境 一 致 , 若 不 一 致 需要 对 差异 性 进 
行 分 析 ; 

(6) 测试 用 例 的 输入 应 至 少 包括 有 效 等 价 类 值 、 无 效 等 价 类 值 和 边界 值 ; 

(7) 测试 人 员 应 尽 可 能 的 与 开发 人 员 分 离 ; 

(8) 针对 软件 配置 项 的 具体 需求 应 增加 相应 的 专门 测试 。 


6.3 配置 项 测试 环境 


配置 项 测试 一 般 需 要 在 目标 环境 下 进行 。 若 无 法 使 用 实际 的 运行 环境 时 ,可 以 使 用 有 
效 的 仿真 环境 进行 配置 项 测试 。 但 是 ,应 对 仿真 环境 与 实际 运行 环境 的 差异 进行 分 析 ,确保 
仿真 环境 与 实际 和 运行 环境 是 等 效 的 。 另 外 ,配置 项 测试 需要 使 用 一 些 专用 工具 ,甚至 需要 开 
发 一 些 数据 仿真 和 数据 获取 工具 才能 完成 相应 的 测试 。 

配置 项 测试 环境 的 建立 可 以 从 以 下 4 个 方面 考虑 。 


1. 硬件 环境 

在 进行 配置 项 测试 时 ,应 尽 可 能 地 使 用 软件 实际 的 硬件 环境 。 若 确实 无 法 保证 环境 的 
一 致 性 ,可 搭建 仿真 环境 来 实现 测试 环境 ,但 应 对 仿真 环境 与 实际 硬件 环境 的 差异 进行 分 
析 ,说 明 对 测试 结果 的 影响 。 


2. 操作 系统 环境 
在 进行 配置 项 测试 中 需要 充分 考虑 操作 系统 的 要 求 。 


3. 数据 库 环境 

目前 以 数据 库 为 基础 的 信息 系统 非常 普遍 .因此 在 进行 配 管 项 测试 时 ,需要 根据 软件 研 
制 任务 书 或 软件 需求 规格 说 明 中 描述 的 数据 库 环 境 要 求 建 立 配 管 项 测试 环境 。 这 是 因为 不 
同 的 数据 库 系统 的 性 能 ,容量 都 存在 不 同 ,在 配置 项 测试 时 要 尤其 关注 这 部 分 内 容 。 


4. 网 络 环境 
网 络 环境 是 影响 软件 性 能 等 的 关键 因素 ,因此 在 进行 配置 项 测试 时 ,应 按照 研制 要 求 采 
用 实际 的 网 络 环境 。 某 配 团 项 测试 的 网 络 环境 示意 图 如 图 6-1 所 示 。 
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6.4 配置 项 测试 策略 


配置 项 测试 主要 采用 黑 盒 测试 技术 ,对 安全 关键 等 级 较 高 的 软件 ,应 适当 地 采用 白 盒 测 
试 技术 保证 测试 的 充分 性 。 配 置 项 测试 策略 需要 根据 被 测 软件 的 特点 ,确定 测试 仿真 程序 
所 需要 提供 的 能 力 , 并 提出 测试 数据 的 要 求 。 

进行 软件 配置 项 测试 应 具备 以 下 基本 条 件 : 

(1) 具有 软件 研制 任务 书 和 (或 ) 软 件 需求 规格 说 明 ( 含 接口 需求 规格 说 明 )、 用 户 手册 / 
操作 手册 ; 

(2) 已 完成 软件 配置 项 的 单元 测试 和 集成 测试 ; 

(3) 软件 配置 项 已 按照 软件 配置 管理 要 求 进行 受 控 管 理 ; 

(4) 软件 配置 项 源 代码 通过 编译 或 汇编 ; 

(5) 软件 配置 项 通常 需要 进行 功能 测试 ,性 能 测试 ,接口 测试 .人 机 交互 界面 测试 .强度 
测试 . 余 量 测试 .安全 性 测试 .恢复 性 测试 ,边界 测试 ,数据 处 理 测试 .安装 性 测试 和 容量 测 
试 , 具 体 的 测试 类 型 需 根据 软件 需求 确定 。 


6.5 配置 项 测试 内 容 


配置 项 测试 的 内 容 应 根据 软件 研制 任务 书 和 (或 ?需求 规格 说 明 ( 含 接口 需求 ) 中 的 要 求 
确定 ,下 面 简称 软件 需求 。 一 般 情 况 下 .应 包括 如 下 内 容 : 

(1) 软件 需求 中 定义 的 功能 需求 ; 

(2) 软件 需求 中 定义 的 性 能 需求 ; 

(3) 软件 配置 项 的 人 机 交互 界面 提供 的 操作 和 显示 界面 的 正确 性 要 求 ; 

(4) 应 测试 运行 在 边界 状态 和 异常 状态 下 ,或 在 人 为 设 定 的 状态 下 ,软件 配置 项 的 功能 
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和 性 能 ; 

(5) 应 按 软件 需求 的 要 求 :测试 配置 项 的 安全 性 和 数据 的 安全 保密 性 ; 

(6) 应 测试 配置 项 的 所 有 外 部 输入 、 输 出 接口 (包括 和 硬件 之 间 的 接口 ); 

(7) 应 测试 配置 项 的 全 部 存储 量 、 输 入 /输出 通道 的 吞吐 能 力 和 处 理 时 间 的 余 量 ; 

(8) 应 按 软件 需求 的 要 求 , 对 配置 项 的 功能 .性 能 进行 强度 测试 ; 

(9) 应 测试 设计 中 用 于 提高 配置 项 的 安全 性 和 可 靠 性 的 方案 ,如 结构 .算法 、 容 错 、 宛 
余 、 中 断 处 理 等 ; 

(10) 对 安全 性 关键 的 配置 项 ,应 对 其 进行 安全 性 分 析 , 明 确 每 一 个 危险 状态 和 导致 危 
仿 的 可 能 原因 ,并 对 此 进行 针对 性 地 测试 ; 

(11) 对 有 恢复 或 重 管 功能 需求 的 软件 配 管 项 ,应 测试 其 恢复 或 重 管 功能 和 平均 恢复 时 
间 ,并且 对 每 一 类 导致 恢复 或 重 曾 的 情况 进行 测试 。 


6.6 配置 项 测试 方法 


软件 配置 项 测试 主要 采用 黑 盒 测试 技术 ,适当 运用 白 盒 测 试 技 术 。 例 如 ,对 安全 关键 等 
级 较 高 的 垦 入 式 软 件 进行 配 管 项 级 测试 时 ,要 辅助 使 用 相应 的 白 盒 测试 工具 进行 覆盖 率 统 
计 和 测试 覆盖 分 析 ,帮助 进行 测试 用 例 设 计 。 

对 安全 关键 等 级 较 高 的 软件 配置 项 测试 ,可 能 还 包括 文档 审查 .代码 审查 .静态 分 析 、 代 
码 走 查 和 浊 辑 测试 。 其 中 ,文档 审查 .代码 审查 .静态 分 析 \ 代 码 走 查 和 浊 辑 测试 方法 的 详细 
内 容 , 见 第 2 章 和 第 3 章 相 关 描 述 。 

软件 配置 项 的 测试 内 容 主 要 是 以 软件 研制 任务 书 和 (或 ) 软 件 需 求 规格 说 明 描述 的 软件 
需求 (功能 和 非 功 能 ) 为 依据 。 另 外 ,对 一 些 软件 配置 项 的 隐 含 需求 也 需要 进行 测试 。 

软件 测试 的 类 型 有 很 多 种 分 类 方法 ,较为 常用 的 有 传统 的 分 类 方法 和 以 质量 特性 来 划 
分 的 方法 。 这 两 种 分 类 方法 存在 一 定 的 对 应 关系 ,如 表 6-1 所 示 。 本 书 按照 传统 的 分 类 方 
法 进行 介绍 ,本章 主 要 介绍 软件 配置 项 测试 常用 的 测试 类 型 ,包括 : 功能 测试 .性 能 测试 、 接 
口 测 试 .人 机 交互 界面 测试 .强度 测试 , 余 量 测试 .安全 性 测试 .恢复 性 测试 .边界 测试 .数据 
处 理 测 试 .安装 性 测试 和 容量 测试 。 

一 般 情 况 下 ,可 靠 性 测试 和 互 操作 性 测试 ,兼容 性 测试 等 在 系统 测试 中 进行 ,相关 内 容 
将 在 后 续 章 节 进 行 介绍 。 进 行 哪些 类 型 的 测试 .需要 根据 软件 的 具体 特点 进行 具体 分 析 ,不 
能 一 概 而 论 。 


表 6-1 质量 特性 与 传统 分 类 方法 的 对 应 关系 


质量 
特性 


适合 性 
准确 性 
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传统 人 机 rn | 加 
特性 测试 试 | 试 | 试 测试 | 试 测试 | 试 
互 操作 性 Wk 
安全 保密 性 bb 
成 熟 性 
容错 性 v v We v 
易 恢复 性 从 
易学 性 L 
易 操 作 性 Li 
吸引 性 
时 间 特 性 Le 
资源 利用 性 v 
易 分 析 性 4 
易 改 变性 Dd 
稳定 性 
易 测试 性 v 
适应 性 本 
易 安 装 性 
共存 性 
易 替 换 性 




































































6.6.1 功能 测试 


功能 测试 是 软件 配置 项 测试 中 最 基本 的 测试 ,主要 是 依据 软件 需求 规格 说 明 中 的 功能 
需求 进行 的 测试 ,以 确认 其 功能 是 否 满足 要 求 。 

1. 测试 技术 要 求 

功能 测试 一 般 需 进行 下 列 各 项 的 测试 .其 中 (1) (2) (3) 项 为 必 做 项 ， 

01) 使 用 正常 值 等 价 类 进行 测试 : 

(2) 使 用 异常 值 等 价 类 进行 测试 ; 

(3) 对 每 个 功能 使 用 合法 边界 值 和 非法 边界 值 进行 测试 

(4) 用 一 系列 真实 的 数据 进行 超 负 荷 .饱和 及 其 他 “最 坏 情况 ”的 测试 ; 

(5) 在 配置 项 测试 时 ,应 对 配置 项 控制 流程 的 正确 性 .合理 性 等 进行 测试 。 
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2. 实施 要 点 

配置 项 功能 测试 一 般 是 基于 软件 需求 规格 说 明 的 测试 ,应 对 软件 需求 规格 说 明 进 行 分 
析 ,梳理 出 测试 需求 项 ,确定 测试 输入 数据 和 输出 数据 ,提出 可 能 需要 的 数据 准备 要 求 测试 
工具 和 需 开 发 的 测试 程序 等 要 求 , 具 体 的 步骤 如 下 。 

(1) 根据 软件 需求 规格 说 明 标识 需 测试 的 每 一 项 功能 需求 ,包括 隐 含 的 功能 需求 。 在 
功能 测试 中 ,需要 特别 关注 隐 含 需求 的 梳理 ,根据 作者 们 从 事 软件 测试 多 年 的 经 验 , 研 制 人 
员 在 需求 规格 说 明 中 明确 描述 的 软件 功能 需求 一 般 最 多 达到 80%。 而 出 现 问 题 最 多 的 地 
方 往往 涉及 隐 含 需求 。 

(2) 确定 每 一 项 功能 应 满足 的 要 求 。 

(3) 分 析 每 一 项 功能 可 能 出 现 的 异常 情况 。 

(4) 对 功能 测试 需求 划分 优先 级 。 如 果 软 件 需求 规格 说 明 中 已 明确 各 项 功能 的 优先 
级 ,测试 需求 的 优先 级 应 与 需求 规格 说 明 中 的 相应 优先 级 保持 一 致 ;否则 ,可 以 根据 该 功能 
失效 后 对 软件 造成 的 影响 确定 测试 需求 的 优先 级 。 

(5) 对 每 项 功能 测试 需求 应 确定 测试 数据 输入 和 测试 结果 捕获 方法 。 

(6) 功能 测试 中 最 常用 的 测试 设计 方法 是 等 价 类 划分 方法 ,包括 有 效 等 价 类 和 无 效 等 
价 类 。 有 效 等 价 类 用 于 正常 工作 流程 .正常 输入 值 测试 ;无 效 等 价 类 用 于 非 正 常 工作 流程 、 
非 正 常 值 输入 测试 。 

(7) 边界 值 分 析 方 法 是 功能 测试 中 对 等 价 类 划分 方法 的 重要 补充 。 很 多 情况 下 ,软件 
在 处 理 边界 值 时 经 常会 发 生 错误 ,因此 针对 边界 进行 分 析 、 测 试 十 分 必要 。 

(8) 因果 图 、 决 策 表 、 基 于 场景 的 测试 .组 合 测试 和 猜 错 法 等 第 3 章 中 介绍 的 动态 测试 
用 例 设计 方法 ,可 以 根据 软件 配置 项 实现 的 具体 功能 适当 地 加 以 应 用 。 


6.6.2 性 能 测试 


性 能 测试 是 对 软件 需求 规格 说 明 中 规定 的 性 能 需求 逐 项 进行 的 测试 ,以 验证 其 性 能 是 
否 满足 要 求 。 


1. 测试 技术 要 求 

性 能 测试 一 般 需 进行 下 列 各 项 的 测试 ,其 中 (1)、(2)、(3) 项 为 必 做 项 : 
(1) 软件 在 定量 结果 计算 时 的 处 理 精度 测试 ; 

(2) 软件 时 间 特 性 和 实际 完成 功能 的 时 间 ( 响 应 时 间 ) 测 试 ; 

(3) 软件 完成 功能 所 处 理 的 数据 量 测试 ; 

(4) 软件 运行 所 占用 空间 的 测试 ; 

(5) 软件 负荷 潜力 测试 。 


2. 实施 要 点 

(1) 按照 软件 需求 规格 说 明 标识 需要 测试 的 性 能 需求 .额外 增加 的 性 能 测试 需求 应 得 
到 用 户 的 确认 .并且 性 能 指标 要 适当 考虑 软件 的 应 用 环境 和 任务 要 求 。 

(2) 测试 处 理 精 度 时 ,可 通过 捕获 输出 数据 确认 软件 的 处 理 精度 是 否 满足 要 求 。 

(3) 测试 软件 响应 时 间 时 ,可 通过 记录 处 理 前 时 间 Tl 和 处 理 后 时 间 T2, 计 算 处 理 后 与 
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处 理 前 时 间 之 差 获得 软件 响应 时 间 。 Ee 

(4) 测试 软件 数据 处 理 周期 和 数据 量 时 ,可 按照 软件 需求 规格 说 明 中 要 求 的 速度 或 数 
据 量 发 送 数据 ,捕获 处 理 后 输出 的 数据 正确 且 无 丢失 即 可 认为 满足 要 求 。 

(5) 对 于 时 间 指 标的 测试 ,需要 使 用 相 匹 配 的 测量 设备 ,根据 需要 可 在 时 统 时 间 、 计 算 
机 时 间 、 手 持 秒 表 等 设备 中 选取 。 

(6) 当时 间 指 标 要 求 高 于 1s 时 ,应 编写 测试 程序 获得 时 统 时 间或 者 计算 机 时 间作 为 计 
算 时 间 。 

(7) 由 于 测试 的 不 确定 性 ,性 能 测试 用 例 应 执行 多 次 ,应 准确 .详细 地 记录 实际 的 执行 
结果 ,并 进行 最 大 值 . 最 小 值 . 平 均值 等 分 析 。 

(8) 性 能 测试 时 ,应 考虑 在 正常 .最 好 、 最 坏 情况 下 的 性 能 差异 。 

(9) 与 硬件 环境 相关 的 性 能 测试 应 在 目标 环境 下 实施 。 


6.6.3 接口 测试 


接口 测试 是 对 软件 需求 规格 说 明 或 设计 文档 的 接口 需求 逐 项 进行 的 测试 。 


1. 测试 技术 要 求 

接口 测试 一 般 需 进行 下 列 各 项 的 测试 ,其 中 (1) 2) 项 为 必 做 项 : 

(1) 测试 所 有 软件 配置 项 的 外 部 接口 ,包括 与 其 他 软件 配置 项 和 硬件 配置 项 之 间 的 接 
口 ,检查 接口 信息 的 格式 及 内 容 是 否 满足 要 求 ; 

(2) 对 每 一 个 外 部 输入 /输出 接口 必须 进行 正常 和 异常 情况 的 测试 。 


2. 实施 要 点 

(1) 配 辕 项 接口 测试 的 依据 是 软件 需求 规格 说 明 中 的 外 部 接口 定义 或 软件 接口 需求 规 
格 说 明 中 定义 的 接口 。 

(2) 对 输入 接口 进行 测试 时 ,应 按照 接口 信息 的 格式 和 内 容 , 使 用 测试 程序 输入 格式 正 
确 、 内 容 正 确 的 测试 数据 ,以 及 格式 错误 、 内 容错 误 的 测试 数据 。 

(3) 对 输出 接口 进行 测试 时 ,应 使 用 测试 程序 捕获 被 测 软件 的 输出 数据 ,检查 是 否 满足 
接口 信息 的 格式 要 求 , 内 容 是 否 正确 。 

(4) 对 API 接口 进行 测试 时 ,需要 关注 是 否 支 持 多 个 调用 的 情况 。 

(5) 对 TCP .串口 类 接口 进行 测试 时 ,应 模拟 几 帧 粘连 在 一 起 的 情况 ,测试 应 用 软件 是 
和 否 能 从 粘连 的 数据 中 提取 有 效 数 据 。 

(6) 对 网 络 接口 进行 测试 时 ,应 关注 如 下 错误 类 型 的 测试 : 

@ 任务 标志 错误 ,包括 : 不 存在 的 任务 标志 或 非 本 次 任务 标志 ; 

@ 信 源 信 宿 错误 ,包括 : 不 存在 的 信 源 信 宿 或 非 规定 的 信 源 信 宿 ; 

@ 数据 标志 错误 ,不 存在 的 数据 标志 或 非 规定 的 数据 标志 ; 

团 包 序 号 错误 ,包括 : 包 序号 不 连续 、 包 序号 倒序 、 包 序号 重复 ; 

@ 数据 域 错误 ,包括 : 数据 域 长 度 字段 值 小 于 实际 数据 域 长 度 、 数 据 域 长 度 字 段 值 大 
于 实际 数据 域 长 度 等 。 

(7) 对 以 文件 方式 定义 的 接口 进行 测试 时 ,错误 一 般 应 包括 文件 不 存在 ,文件 打开 失 
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| 败 、 文 件 保存 失败 、 文 件 中 数据 不 符合 要 求 、 文 件 中 数据 字段 不 完整 等 。 
(8) 对 数据 库 接口 进行 测试 时 ,应 对 下 列 内 容 进行 测试 : 
@ 数据 库 连接 异常 及 恢复 ; 
四 大 规模 并 发 访问 控制 ; 
@ 数据 表 增 、 删 改 权限 控制 ; 
中 数据 库 同步 操作 ; 
回 数据 库 备份 及 还 原 ; 
@ 数据 标识 唯一 性 判别 ; 
@ 数据 表 元 素 修改 和 插入 的 不 完整 提交 ， 
@@ 数据 元 素 完整 性 判别 ; 
@ 异常 数据 元 素 字 段 写 人 和 修改 控制 ; 
四 数据 表 间 一 致 性 检查 ; 
四 数据 元 素 修改 和 删除 的 依赖 控制 ; 
@ 数据 表 键 值 设计 合理 性 检查 等 。 


6.6.4 人 机 交互 界面 测试 


人 机 交互 界面 测试 是 对 所 有 人 机 交互 界面 提供 的 操作 和 显示 界面 进行 的 测试 ,以 检验 
是 否 满足 用 户 的 要 求 。 


1. 测试 技术 要 求 

人 机 交互 界面 测试 一 般 需 进行 下 列 各 项 的 测试 .其 中 (2)、(3) 两 项 中 必 做 一 项 : 

(1) 测试 操作 和 显示 界面 及 界面 风格 与 软件 需求 规格 说 明 、 用 户 手 册 或 操作 手册 中 要 
求 的 一 致 性 和 符合 性 ; 

(2) 以 非常 规 操作 、 误 操作 ,快速 操作 来 检验 人 机 界面 的 健壮 性 ; 

(3) 测试 对 错误 命令 或 非法 数据 输入 的 检测 能 力 与 提示 情况 ; 

(4) 测试 对 错误 操作 流程 的 检测 与 提示 ; 

(5) 对 照 用 户 手 册 或 操作 手册 逐条 进行 操作 和 观察 。 


2. 实施 要 点 

(1) 人 机 交互 界面 测试 的 依据 是 软件 用 户 手册 或 操作 手册 。 

(2) 对 照 用 户 手 册 或 操作 手册 逐条 进行 操作 和 检查 。 

(3) 通过 界面 输入 错误 的 和 无 效 的 参数 ,例如 对 需要 输入 整数 的 界面 操作 ,可 输入 字 
符 、 浮 点 数 等 非法 值 . 测 试 软件 是 否 有 相应 的 验证 和 防范 措施 。 

(4) 在 进行 是 否 设置 默认 值 的 测试 时 ,可 在 界面 中 不 输入 任何 数值 或 字符 ,测试 软件 是 
否 采用 默认 值 进行 后 续 工 作 。 

(5) 在 进行 违反 流程 的 测试 中 ,应 采用 用 户 使 用 过 程 中 可 能 出 现 的 违反 操作 流程 的 情 
况 进 行 测试 ,测试 软件 是 否 具有 防止 误 操 作 的 能 力 。 

(6) 使 用 界面 测试 工具 ,编写 界面 快速 操作 和 重复 操作 的 脚本 .测试 软件 是 否 具有 快速 
响应 能 力 或 具有 防止 重复 操作 的 机 制 。 
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(7) 测试 对 重要 信息 进行 不 可 道 操作 (例如 删除 等 操作 ?时 ,是 否 有 防范 误 操作 手段 或 
提示 确认 操作 的 信息 。 


6.6.5 强度 测试 


强度 测试 是 强制 软件 运行 在 不 正常 到 发 生 故 障 的 情况 下 (设计 的 极限 状态 到 超出 极 
限 ) ,检验 软件 可 以 运行 到 何 种 程度 的 测试 。 


1. 测试 技术 要 求 

一 般 根据 软件 配置 项 的 具体 需求 选择 进行 如 下 强度 测试 : 

(1) 提供 最 大 处 理 的 信息 量 ， 

(2) 提供 数据 能 力 的 饱和 实验 指标 ; 

(3) 提供 最 大 存储 范围 (如 常 驻 内 存 、 缓 冲 、 表 格 区 、 临 时 信息 区 ); 

(4) 在 能 力 降级 时 进行 测试 ; 

(5) 在 人 为 错误 (如 寄存 器 数据 跳 变 、 错 误 的 接口 ) 状 态 下 进行 软件 反应 的 测试 ; 

(6) 通过 启动 软件 过 载 安全 装 管 (如 临界 点 警报 、 过 载 溢 出 功能 、 停 止 输入 、 取 消 低 速 设 
备 等 ) 生 成 必要 条 件 , 进 行 计算 过 载 的 饱和 测试 ; 

(7) 需 进 行 持续 一 段 规定 的 时 间 ,而 且 连续 不 能 中 断 的 测试 。 


2. 实施 要 点 

(1) 一 般 情 况 下 ,强度 测试 与 软件 配置 项 的 性 能 要 求 有 较为 紧密 的 关系 ,因此 ,可 以 针 
对 性 能 要 求 考虑 对 软件 配置 项 的 强度 进行 相应 的 测试 。 

(2) 强度 测试 重点 考察 软件 在 运行 环境 最 为 复杂 的 情况 下 ,完成 相应 功能 的 能 力 , 因 此 
需要 设计 软件 在 复杂 情况 下 所 需 的 环境 。 

(3) 对 与 数据 流量 相关 的 强度 测试 时 ,首先 输入 正常 数据 量 ,然后 逐步 提高 数据 量 使 其 
达到 性 能 指标 所 要 求 的 数据 量 ,观察 被 测 软件 输出 是 否 正常 ,在 该 数据 量 下 运行 所 要 求 的 时 
间 后 ,继续 提高 数据 量 以 达到 性 能 下 降 的 临界 状态 ,记录 临界 状态 下 的 数据 量 。 继 续 提高 数 
据 量 ,使 得 被 测 软 件 处 于 降级 处 理 状态 .随后 降低 数据 量 ,使 被 测 软件 恢复 正常 。 在 测试 过 
程 中 ,应 关注 被 测 软 件 的 CPU、 内 存 占用 及 其 他 相关 的 性 能 指标 情况 。 

(4) 在 进行 软件 长 时 间 连 续 运 行 的 测试 时 ,时 间 应 以 软件 需求 规格 说 明 或 其 他 相关 文 
档 中 要 求 的 为 准 。 没 有 明确 要 求 的 .默认 为 一 个 业务 周期 。 在 连续 运行 过 程 中 ,应 达到 最 大 
处 理 能 力 并 略 超出 一 点 ,再 恢复 到 正常 处 理 水 平 , 重 复 操作 多 次 。 


6.6.6 余 量 测试 


余 量 测试 是 对 软件 是 否 达 到 需求 规格 说 明 中 要 求 的 余 量 的 测试 。 如 果 没 有 明确 要 求 
时 ,一 般 至 少 保留 20% 的 余 量 。 


1. 测试 技术 要 求 
一 般 根据 软件 配置 项 的 具体 需求 选择 进行 如 下 余 量 测试 : 
(1) 全 部 存储 量 的 余 量 ; 
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(2) 输入 /输出 及 通道 的 吞吐 能 力 余 量 ; 
(3) 功能 处 理 时 间 的 余 量 。 


2. 实施 要 点 

(1) 余 量 测试 一 般 与 功能 、 性 能 、 强 度 等 测试 一 起 进行 。 

(2) 应 注意 观察 软件 在 功能 、 性 能 、 强 度 等 测试 中 ,处 于 空闲、 正常 、 满 负荷 .临界 状态 下 
的 CPU 和 内 存 的 使 用 情况 .并 计算 出 余 量 。 

(3) 在 进行 处 理 时 间 的 余 量 测试 时 ,使 得 软件 保持 正常 运行 状态 ,观察 功能 处 理 时 间 ， 
与 软件 需求 规格 说 明 中 要 求 的 功能 处 理 时 间 进 行 比较 ,计算 出 余 量 。 

(4) 在 进行 输入 /输出 及 通道 的 吞吐 能 力 余 量 测试 时 ,可 通过 输入 最 大 数据 量 , 观 察 被 
测 软件 的 输出 ,与 软件 需求 规格 说 明 中 要 求 的 输入 /输出 及 通道 吞吐 能 力 进 行 比较 ,计算 出 
相应 的 余 量 。 

(5) 软件 配置 项 余 量 测试 一 般 应 在 软件 的 目标 运行 环境 下 进行 , 若 采用 仿真 环境 应 充 
分 分 析 其 差异 性 ,以 便 保 证 测试 结果 的 有 效 性 。 

(6) 同性 能 测试 相同 , 余 量 测试 也 需要 进行 多 次 测试 。 


6.6.7 安全 性 测试 


安全 性 测试 是 检验 软件 中 已 存在 的 安全 性 .安全 保密 性 措施 是 否 有 效 的 测试 。 测 试 应 
尽 可 能 在 符合 实际 使 用 的 条 件 下 进行 。 


1. 测试 技术 要 求 

一 般 根 据 软件 配置 项 的 具体 需求 选择 进行 如 下 安全 性 测试 ， 

(1) 对 安全 关键 等 级 较 高 的 软件 配置 项 ,必须 单独 测试 安全 性 需求 ; 

(2) 在 测试 中 全 面 检 验 防止 危险 状态 措施 的 有 效 性 和 每 个 危险 状态 下 的 反应 ; 

(3) 对 设计 中 用 于 提高 安全 性 的 结构 ,算法 、 容 错 、 宙 余 及 中 断 处 理 等 方案 ,必须 进行 针 
对 性 测试 ; 

(4) 对 软件 处 于 标准 配置 下 其 处 理 和 保护 能 力 进行 测试 ; 

(5) 应 进行 对 异常 条 件 下 系统 /软件 的 处 理 和 保护 能 力 的 测试 (以 表明 不 会 因为 可 能 的 
单个 或 多 个 输入 错误 而 导致 不 安全 状态 ); 

(6) 对 输入 故障 模式 的 测试 ; 

(7) 必须 包含 边界 .界外 及 边界 结合 部 的 测试 ; 

(8) 对 “0”、 穿 越 *0” 以 及 从 两 个 方向 趋 近 于 “0” 的 输入 值 的 测试 ; 

(9) 必须 包括 在 最 坏 情况 配置 下 的 最 小 输入 和 最 大 输入 数据 率 的 测试 ; 

(10) 对 安全 性 关键 的 操作 错误 的 测试 ; 

(11) 对 具有 防止 非法 进入 软件 并 保护 软件 的 数据 完整 性 能 力 的 测试 ; 

(12) 对 双 工 切换 、 多 机 替换 的 正确 性 和 连续 性 的 测试 ; 

(13) 对 重要 数据 的 抗 非法 访问 能 力 的 测试 。 


2. 实施 要 点 
(1) 对 关键 等 级 较 高 的 软件 配置 项 进行 软件 安全 性 测试 时 ,应 基于 软件 安全 性 分 析 的 
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基础 开展 。 

(2) 安全 性 测试 内 容 应 覆盖 所 有 安全 性 需求 。 

(3) 在 进行 软件 安全 性 测试 时 ,应 考虑 各 种 异常 输入 和 异常 操作 。 

(4) 对 安全 关键 的 操作 进行 测试 时 ,需要 测试 其 是 否 提供 再 次 确认 操作 。 

(5) 在 进行 双 工 切换 操作 时 ,需要 考虑 以 下 测试 内 容 : 

中 重复 多 次 双 工 切换 、 多 机 蔡 换 ， 

@ 模拟 无 主机 的 状况 ,测试 软件 是 否 能 报警 或 自动 选 出 一 个 主机 ; 

@ 模拟 多 主机 的 状况 ,测试 软件 是 否 能 报警 或 自动 选 出 一 个 主机 ,并 且 在 多 主机 期 间 
没有 产生 违反 安全 性 的 后 果 。 

(6) 测试 用 错误 用 户 名 、 错 误 密 码 ,超出 权限 等 非法 身份 访问 软件 。 

(7) 应 检查 软件 在 进行 权限 判断 时 ,是 否 无 信息 泄露 。 

(8) 对 于 可 远程 提供 SQL 查询 语句 的 软件 :应 测试 其 防止 "SQL 注入 ”攻击 的 能 力 。 对 
于 可 远程 提供 命令 行 执行 语句 的 软件 ,应 测试 其 防止 "Shell 命令 注入 "攻击 的 能 力 。 

(9) 对 有 用 户 权限 管理 的 软件 ,除了 应 进行 各 类 用 户 权限 管理 测试 外 ,还 应 检查 保存 用 
户 密码 的 数据 库 或 文件 是 否 进 行 了 加 密 保存 ,对 安全 关键 数据 是 否 进行 了 加 密 处 理 。 

(10) 测试 各 种 资源 不 满足 的 情况 ,软件 是 否 能 够 避免 骨 溃 或 异常 退出 。 例 如 文件 访问 
操作 中 路 径 不 存在 文件 不 存在 、 网 络 应 用 中 网 卡 禁 用 /不 存在 .串口 通信 软件 找 不 到 串口 设 
备 等 。 


6.6.8 恢复 性 测试 


恢复 性 测试 是 对 有 恢复 或 重 兽 功能 的 软件 的 每 一 类 导致 恢复 或 重 曾 的 情况 ,逐一 进行 
的 测试 ,以 验证 其 恢复 或 重 曾 的 能 力 。 恢 复 性 测试 是 要 证 实在 克服 硬件 故障 后 ,系统 能 否 正 
常 地 继续 进行 工作 , 且 不 对 系统 造成 任何 损害 。 


1. 测试 技术 要 求 

一 般 根据 软件 配置 项 的 具体 需求 选择 进行 如 下 恢复 性 测试 : 

(1) 探测 错误 功能 的 测试 ; 

(2) 能 否 切 换 或 自动 启动 备用 硬件 的 测试 ; 

(3) 在 故障 发 生 时 能 否 保 护 正在 运行 的 作业 和 系统 状态 的 测试 ; 

(4) 在 系统 恢复 后 .能 否 从 最 后 记录 下 来 的 无 错误 状态 开始 继续 执行 作业 的 测试 。 


2. 实施 要 点 

(1) 软件 恢复 性 测试 应 按照 软件 需求 规格 说 明 中 定义 的 软件 恢复 性 要 求 进行 。 

(2) 柑 入 式 软 件 “ 看 门 狗 ” 测 试 被 认为 是 恢复 性 测试 中 的 典型 类 型 。 在 进行 “看 门 狗 ” 测 
试 时 ,可 修改 被 测 软件 代码 :加 入 死 循 环 代码 。 通 过 引发 死 循环 ,测试 软件 在 这 种 情况 下 ,是 
和 否 能 够 通过 看 门 狗 复位 使 程序 重新 启动 。 

(3) 软件 断 点 续 传 功能 的 测试 被 认为 是 较为 典型 的 恢复 性 测试 。 

(4) 对 具有 数据 恢复 能 力 的 软件 .测试 在 断 电 等 异常 情况 发 生 时 ,软件 重新 运行 后 恢复 
运行 的 能 力 。 
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6.6.9 边界 测试 


边界 测试 是 对 软件 处 在 边界 或 端点 情况 下 运行 状态 的 测试 。 


1. 测试 技术 要 求 

一 般 根据 软件 配置 项 的 具体 需求 选择 进行 如 下 边界 测试 : 
(1) 软件 的 输入 域 和 输出 域 的 边界 或 端点 的 测试 ; 

(2) 状态 转换 的 边界 或 端点 的 测试 ; 

(3) 功能 界限 的 边界 或 端点 的 测试 ; 

(4) 性 能 界限 的 边界 或 端点 的 测试 ; 

(5) 容量 界限 的 边界 或 端点 的 测试 。 


2. 实施 要 点 

(1) 边界 测试 不 仅 要 考虑 输入 域 的 测试 ,还 需要 进行 输出 域 的 测试 。 

(2) 边界 测试 一 般 需 考虑 小 于 下 边界 ,等 于 下 边界 、 大 于 下 边界 、 小 于 上 边界 、 等 于 上 边 
界 、 大 于 上 边界 6 种 情况 的 测试 。 

(3) 对 输出 域 的 边界 测试 .应 通过 控制 输入 数据 实现 输出 边界 的 测试 。 

(4) 性 能 界限 的 边界 测试 往往 是 强度 测试 的 考虑 内 容 ,可 一 并 考虑 。 

(5) 容量 界限 的 边界 测试 与 容量 测试 是 一 致 的 。 

(6) 对 于 功能 边界 的 测试 ,应 建立 达到 功能 边界 的 条 件 。 例 如 超过 某 个 边界 时 使 用 不 
同 的 测量 设备 ,测试 时 就 需要 建立 模拟 输入 ,使 系统 刚好 处 于 这 种 状态 下 ,检查 是 否 按照 规 
定 选择 了 正确 的 测量 设备 。 


6.6.10 数据 处 理 测试 


数据 处 理 测试 属于 功能 测试 的 具体 化 ,是 对 完成 专门 数据 处 理 功能 所 进行 的 测试 。 


1. 测试 技术 要 求 

数据 处 理 测 试 一 般 需 进行 以 下 (2)、(3)、(4)、(5) 测 试 项 中 至 少 一 项 测试 : 
(1) 数据 采集 功能 的 测试 ; 

(2) 数据 融合 功能 的 测试 ; 

(3) 数据 转换 功能 的 测试 ; 

(4) 剔除 坏 数据 功能 的 测试 ; 

(5) 数据 解释 功能 的 测试 .例如 : 拆 包 、 解 包 。 


2. 实施 要 点 

(1) 通常 情况 下 ,在 软件 需求 规格 说 明 中 有 专门 的 数据 处 理 功能 时 , 需 进行 数据 处 理 
测试 。 

(2) 在 进行 采集 功能 测试 时 ,应 进行 如 下 测试 : 

@ 数据 采集 周期 是 否 与 需求 一 致 .特别 是 需 对 多 种 数据 进行 采集 时 各 自 不 同 的 采集 周 
期 是 否 符合 要 求 , 另 外 还 应 对 采样 时 间 有 中 断 、. 误 差 是 否 有 积累 等 情况 进行 测试 ; 
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@ 有 多 路 数据 时 ,数据 的 选择 策略 是 否 正确 。 | | 


(3) 在 进行 数据 融合 功能 的 测试 时 ,应 进行 如 下 测试 : 

a 应 进行 单个 数据 跳 点 处 理 方法 的 正确 性 测试 ; 

@ 应 使 用 等 价 类 方法 ,采用 有 效 等 价 类 无效 等 价 类 和 边界 值 进 行 测试 ， 

@ 应 对 有 误差 修正 要 求 的 数据 进行 误差 修正 测试 ; 

外 应 考虑 过 零 时 数据 融合 处 理 是 否 正确 ; 

@@ 应 考虑 部 分 数据 异常 时 ,数据 融合 处 理 是 否 正 确 ; 

@ 应 考虑 时 间 信 号 异常 时 ,数据 融合 处 理 是 否 正确 。 

(4) 在 进行 数据 转换 功能 的 测试 时 ,应 进行 如 下 测试 : 

@ 量 纲 转换 正确 性 测试 

@ 时 间 制 使 用 正确 性 测试 ,例如 北京 时 或 世界 时 、12 小 时 制 或 24 小 时 制 ,特别 关注 过 





零点 的 处 理 ; 


加 关键 时 间 正 确 性 判断 方法 测试 ,例如 "三 取 二 "或 “七 取 四 "判断 方法 ; 
@ 当 软 件 使 用 多 个 坐标 系 进行 数据 处 理 时 ,应 对 不 同 坐标 系 下 ,数据 转换 正确 性 进行 


测试 。 


(5) 在 进行 数据 解 包 功能 的 测试 时 ,应 进行 如 下 测试 : 
中 数据 帧 格式 的 正确 性 测试 ,例如 一 帧 只 含 一 包 完整 数据 .一 帧 含 多 包 完 整数 据 ` 多 帧 


含 一 包 完 整数 据 等 情况 ; 


加 应 考虑 数据 帧 异常 情况 的 测试 ,例如 一 帧 中 数据 包 数 标识 与 实际 数据 包 数 不 一 致 、 


数据 包 识 别 码 与 实际 数据 内 容 不 一 致 等 。 


6.6.11 安装 性 测试 


安装 性 测试 是 对 安装 过 程 是 否 符合 安装 规程 的 测试 ,以 发 现 安装 过 程 中 的 错误 。 


1. 测试 技术 要 求 

一 般 根据 软件 配置 项 的 具体 需求 选择 进行 如 下 安装 性 测试 : 
(1) 不 同 配置 下 的 安装 和 印 载 测试 ; 

(2) 安装 规程 的 正确 性 测试 。 


2. 实施 要 点 
(1) 安装 性 测试 应 按照 软件 用 户 手 册 / 操 作 手 册 中 规定 的 安装 规程 进行 ,在 被 测 软件 要 


求 的 软 /硬件 配 团 下 安装 被 测 软件 ,并 运行 被 测 软件 ,验证 安装 后 被 测 软件 的 各 项 功能 运行 
正常 之 后 才能 确认 安装 功能 正常 。 


(2) 印 载 被 测 软件 ,验证 印 载 被 测 软件 后 是 否 影响 其 他 软件 的 运行 。 完 成 印 载 后 ,应 重 


新 进行 安装 ,验证 软件 是 否 能 够 正确 地 被 重新 安装 ,并 检查 安装 后 各 项 功能 是 否 能 够 正常 


运行 。 


(3) 应 在 安装 前 获得 计算 机 当前 应 用 程序 清单 ,安装 和 印 载 后 检查 应 用 程序 清单 , 比 对 


两 个 清单 检查 软件 安装 和 印 载 功能 是 否 正 确 。 


(4) 对 于 专用 软件 ,应 在 目标 计算 机 环境 下 执行 安装 和 印 载 测试 。 对 于 通用 软件 , 需 在 
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其 支持 的 各 种 软件 平台 环境 下 进行 测试 .例如 Windows 系统 ,在 Windows XP、Windows 7、 
Windows Server 2008 以 及 Windows 8 等 环境 下 测试 ,必要 时 ,还 需 在 已 安装 有 杀毒 软件 的 
环境 下 进行 测试 。 


6.6.12 容量 测试 


容量 测试 是 检验 软件 的 能 力 最 高 能 达到 什么 程度 的 测试 。 


1. 测试 技术 要 求 
容量 测试 一 般 应 测试 在 正常 情况 下 ,软件 所 具备 的 最 高 能 力 , 例 如 响应 时 间或 并 发 处 理 
个 数 等 能 力 。 


2. 实施 要 点 

(1) 一 般 情况 下 ,容量 是 指 最 快 的 响应 时 间 、 最 大 的 并 发 数量 或 最 大 的 吞吐 量 等 ,在 强 
度 测试 过 程 中 获得 的 临界 值 即 为 软件 的 最 高 处 理 能 力 。 

(2) 容量 测试 一 般 结合 性 能 测试 、 强 度 测试 、 余 量 测试 等 其 他 测试 进行 。 

(3) 容量 测试 的 实施 要 点 见 强 度 测 试 的 实施 要 点 。 


6.7 配置 项 测试 用 例 设计 


配置 项 测试 一 般 采 用 黑 盒 测试 方法 ,用 例 设计 通常 采用 等 价 类 划分 ,边界 值 分 析 、 因 果 
\ 决 策 表 组合 测试 和 错误 推测 等 方法 .有 关 详 细 内 容 参 见 第 3 章 。 
本 节 重 点 介绍 对 关键 等 级 较 高 的 软件 进行 测试 时 ,采用 基于 安全 性 分 析 的 测试 方法 。 


6.7.1 概述 


为 了 解决 高 可 靠 性 安全 性 软件 测试 时 ,测试 用 例 设计 的 充分 性 和 有 效 性 不 足 的 问题 ,可 
采用 基于 安全 性 分 析 的 测试 用 例 设计 及 用 例 选取 的 方法 。 首 先 ,利用 软件 失效 模式 和 影响 
分 析 、 故 障 树 分 析 相 结合 的 方法 进行 软件 安全 性 分 析 。 按 照 失 效 影 响 分 析 、 失 效 模式 危害 分 
析 的 结果 ,选择 影响 大 、 和 危害 程 度 高 的 失效 影响 和 失效 模式 作为 项 事件 和 中 间 事 件 建立 软件 
故障 树 。 然 后 ,将 故障 树 的 最 小 割 集 作 为 测试 用 例 设计 模式 全 集 , 在 测试 资源 有 限 的 条 件 
下 ,根据 最 小 市 集 的 重要 程度 建立 测试 用 例 设计 模式 的 选择 准则 。 最 后 ,依据 选 定 的 测试 用 
例 设计 模式 中 每 个 事件 的 特点 完成 测试 用 例 的 详细 设计 。 

大 型 工程 中 对 软件 等 级 的 划分 都 是 以 安全 等 级 进行 划分 的 ,因此 对 该 类 软件 的 测试 也 
需要 在 安全 性 分 析 的 基础 上 开展 才能 保证 其 充分 性 有效 性 。 

配置 项 测试 时 采用 的 软件 安全 性 分 析 方 法 一 般 选 用 软件 失效 模式 和 影响 分 析 法 
(software failure mode and effect analysis, SFMEA) 与 软件 故障 树 法 (software fault tree 
analysis,SFTA) ,使 用 这 两 种 方法 进行 软件 安全 性 分 析 时 各 有 优 缺 点 。SFEMEA 是 自 底 向 
上 的 分 析 方 法 ,无 法 表达 失效 原因 之 间 的 逻辑 关系 。SFTA 是 自 顶 向 下 树 状 结构 的 分 析 方 
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法 ,这 种 方法 在 选取 项 事件 时 ,可 能 会 遗漏 潜在 的 顶层 失效 事件 。 另 外 ,SFTA 在 分 析 故 障 
原因 时 ,也 可 能 会 有 遗漏 ,这 样 将 影响 底 事 件 的 重要 度 排序 。 
因此 ,本 节 利 用 软件 失效 模式 和 影响 分 析 、 故 障 树 分 析 相 结合 的 方法 ,进行 软件 安全 性 
分 析 。 这 两 种 方法 的 结合 ,弥补 了 软件 失效 模式 和 影响 分 析 对 失效 原因 分 析 不 彻底 的 问题 ， 
也 避免 了 软件 故障 树 分 析 方 法 可 能 忽略 关键 项 事件 的 问题 。 在 安全 性 分 析 的 基础 上 ,通过 
对 获得 的 软件 故障 树 进行 定性 和 定量 的 分 析 , 建 立 了 测试 用 例 设计 模式 的 选取 策略 ,在 最 小 
割 集 的 基础 上 ,采用 该 策略 完成 测试 用 例 设 计 模式 的 生成 。 
采用 SFMEA 与 SFTA 相 结合 的 方法 一 -SFME&FTA 进行 安全 性 分 析 ,做 到 这 两 种 
方法 的 优势 互补 。 在 安全 性 分 析 的 基础 上 ,进行 软件 测试 用 例 的 设计 ,解决 了 高 安全 性 要 求 
软件 测试 的 充分 性 和 有 效 性 问题 。 


6.7.2 ”SFME&FTA 综合 分 析 
SFMER&EFTA 方法 首先 按照 SFMEA 分 析 软 件 的 失效 模式 、 失 效 原因 、 失 效 模式 的 影 


响 以 及 失效 影响 程度 ,根据 失效 影响 危害 分 析 结 果 选 择 顶 事件 ,将 失效 模式 作为 中 间 事 件 ， 
进行 SFTA 分 析 。SFTA 分 析 结 果 作 为 测试 用 例 设计 模式 。SFME&FTA 方法 如 图 6-2 


所 示 。 
确定 失效 模式 
i 1 
分 析 失 效 模式 失效 的 原因 


分 析 失 效 影 响 











分 析 失 效 模式 的 危害 性 





SFTA 分 析 
的 优先 级 ”= 


图 6-2 SFME&FTA 方法 示意 图 


1. 软件 失效 模式 和 影响 分 析 

SFME&.FTA 方法 首先 对 软件 进行 失效 模式 与 影响 分 析 。SFMEA 是 分 析 软 件 系统 中 
所 有 可 能 的 软件 失效 模式 及 其 对 系统 造成 的 影响 .同时 对 每 一 种 失效 模式 按照 严重 程度 、 概 
率 以 及 测试 难度 对 失效 模式 进行 分 类 。 

1) 失效 模式 分 析 

在 进行 软件 失效 模式 分 析 时 .需要 依据 软件 需求 规格 说 明 分 析 软 件 可 能 发 生 的 失效 。 


a 
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一 般 情 况 下 ,软件 都 具有 多 个 功能 ,在 进行 失效 模式 分 析 时 ,应 考虑 每 个 功能 可 能 的 失效 模 
式 。 软 件 的 失效 模式 一 般 包 括 运行 时 失效 .输入 失效 .输出 失效 .性 能 失效 等 。 详 细 的 失效 
模式 的 示例 ,如 表 6-2 所 示 。 

表 6-2 失效 模式 示例 





(1) 未 收 到 输入 

(2) 收 到 的 数据 不 正确 

(3) 收 到 的 数据 不 完整 

(4) 收 到 的 数据 精度 不 满足 要 求 
(1) 程序 无 法 启动 





输入 失效 














(2) 程序 运行 中 非 正常 中 断 

(3) 程序 运行 不 能 终止 

(4) 程序 不 能 退出 

(5) 程序 运行 陷入 死 循 环 

(6) 程序 运行 对 其 他 软件 或 环境 产生 有 害 影响 
(1) 输出 结果 错误 (例如 输出 项 缺损 或 多 余 等 ) 
据 精 度 不 满足 要 求 


运行 失效 





输出 失效 





(4) 输出 格式 错误 

(5) 输出 提示 信息 不 正确 

(1) 未 达到 功能 /性 能 的 要 求 

未 满足 功能 (2) 不 能 满足 用 户 对 运行 时 间 的 要 求 
及 性 能 的 失效 (3) 不 能 满足 用 户 对 数据 处 理 量 的 要 求 
(4) 多 用 户 系统 不 能 满足 用 户 数 的 要 求 
(1) 程序 运行 改变 了 系统 配置 要 求 

(2) 程序 运行 改变 了 其 他 程序 的 数据 
(3) 操作 系统 错误 

(4) 硬件 错误 

其 他 失效 (5) 整个 系统 错误 

(6) 人 为 操作 错误 

(7) 接口 故障 

(8) 1/O 定时 不 准确 导致 数据 丢失 
(9) 维护 不 合理 /错误 
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2) 失效 原因 分 析 

软件 失效 原因 是 软件 中 潜在 的 缺陷 .软件 失效 可 能 由 一 个 或 多 个 软件 缺陷 引起 的 ,在 进 
行 失效 原因 分 析 时 ,应 尽 可 能 全 面 地 分 析 所 有 可 能 的 软件 失效 原因 ,为 软件 测试 用 例 设计 提 
供 尽 可 能 准确 的 设计 模式 。 

3) 失效 影响 分 析 

失效 影响 分 析 是 指 每 个 失效 模式 对 软件 本 身 或 其 他 软件 /硬件 系统 的 影响 。 软 件 失效 
影响 的 严重 程度 等 级 使 用 严酷 度 (effect severity ranking,ESR) 来 定义 。 严 酷 度 等 级 的 评分 
准则 如 表 6-3 所 示 。 





表 6-3 严酷 度 等 级 的 评分 准则 





软件 失效 模式 影响 的 程度 评分 等 级 
影响 系统 运行 的 安全 性 ,或 不 符合 安全 规定 5 
影响 系统 丧失 主要 功能 而 不 能 运行 4 
系统 仍 能 运行 ,但 运行 水 平 降级 ,用 户 不 满意 3 
影响 轻 度 2 
无 影响 1 





1) 失效 模式 危害 性 分 析 

危害 分 析 可 以 用 失效 模式 的 风险 优先 数 RPN 来 表示 , 即 失效 影响 严酷 度 等 级 与 失效 
模式 发 生 概 率 等 级 (occurrence probability ranking. OPR) 的 乘积 。 

(1) 失效 模式 发 生 的 概率 等 级 的 定义 如 表 6-4 所 示 。 


表 6-4 失效 模式 发 生 概率 等 级 评分 





软件 失效 模式 发 生 的 可 能 性 评分 等 级 
故障 模式 发 生 的 可 能 性 非常 高 5 
故障 模式 发 生 的 可 能 性 高 4 
故障 模式 发 生 的 可 能 性 中 等 3 
失效 模式 发 生 的 可 能 性 相对 较 低 2 








失效 模式 发 生 的 可 能 性 极 低 


(2) 测试 难度 等 级 的 评分 准则 。 由 于 测试 资源 (人 员 .设备 和 时 间 ) 是 有 限 的 ,测试 时 需 
要 选择 关键 的 、 重 要 的 以 及 能 够 被 测试 的 软件 失效 模式 进行 测试 。 在 进行 失效 模式 选择 时 ， 
还 需要 对 测试 难度 等 级 进行 定义 。 测 试 难度 等 级 (testing difficulty ranking,TDR) 评 定 的 
准则 如 表 6-5 所 示 。 
表 6-5 测试 难度 等 级 评定 准则 
被 测试 出 的 难度 非常 大 
被 测试 出 的 难度 大 


评分 等 级 
1 








2 
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测试 难度 
被 测试 出 的 难度 中 等 
被 测试 出 的 难度 小 
被 测试 出 的 非常 容易 














2. 软件 故障 树 分 析 

1) 软件 故障 树 项 事件 和 中 间 事 件 选 择 

(1) 软件 故障 树 顶 事件 的 选择 。 在 测试 资源 有 限 的 情况 下 ,测试 人 员 不 得 不 选择 软件 
故障 后 造成 影响 较 大 的 问题 进行 测试 。 这 样 ,软件 故障 树 顶 事件 可 以 根据 影响 程度 分 析 结 
果 进 行 选 择 。 一 般 情 况 下 ,影响 程度 等 级 在 3 级 以 上 ( 含 3 级 ) 的 失效 模式 影响 应 作为 故障 
树 的 项 事件 。 

(2) 软件 故障 树 中 间 事 件 的 选择 。 故 障 树 的 中 间 事 件 通 过 定义 RPN 与 测试 难度 等 级 
乘积 的 值 来 进行 选择 ,也 可 以 通过 指定 严酷 度 \ 发 生 概率 和 测试 难度 中 的 任意 一 个 或 任意 两 
个 的 组 合 值 作 为 失效 模式 选择 的 策略 。 

假设 失效 模式 的 全 集 为 2, 对 每 一 个 失效 模式 FM E2O, 其 严酷 度 、 发 生 概率 和 测试 难 
度 分 别 为 ESR(FM;) 全 ESR;、OPR(FM;) 全 OPR;、TDR(FM;) 全 TDR;, 并 令 RR 表示 它们 的 
集合 , 即 R 三 {ESR,OPR,TDR)。 假 设 中 间 事 件 的 选取 标准 函数 为 RuleCFM) , 则 中 间 事 件 
的 集合 ICQ 可 表示 为 1 二 {FME Q|Rule(FM) 宇 c) ,其 中 Rule(FM) 可 根据 需要 进行 设 定 ， 
一 般 地 可 定义 为 严酷 度 ,发生 概 率 和 测试 难度 中 的 任意 一 个 或 多 个 的 乘积 , 即 Rule(FM,) € 


3 
@={r,|1r, € R}U Cs Ir, € R}U {rp Xr |r, € R,r, ER 二 pp) ,而 cc 为 根据 
p=1 


Rule(FM) 及 实际 需要 设 定 的 一 个 常数 。 

2) 软件 故障 树 的 定性 和 定量 分 析 

在 通过 上 述 (1) 中 失效 模式 影响 选择 策略 获得 影响 大 的 软件 失效 影响 作为 故障 树 的 项 
事件 ,按照 (2) 中 描述 的 方法 将 选择 的 失效 模式 作为 故障 树 的 中 间 事 件 .将 失效 原因 作为 底 
事件 ,形成 软件 故障 树 , 利 用 Fuseell-Vesely 算法 ,通过 对 软件 故障 树 进行 定性 分 析 得 到 最 
小 割 集 。 

最 小 割 集 对 顶 事件 发 生 的 影响 程度 是 不 同 的 ,在 评估 最 小 割 集 的 重要 度 时 ,可 用 概率 重 
要 度 和 关键 重要 度 来 衡量 。 将 软件 故障 树 分 析 后 的 结果 作为 测试 用 例 设计 模式 。 


6.7.3 建立 软件 测试 用 例 设计 模式 


将 软件 故障 树 定性 分 析 结 果 的 最 小 割 集 作 为 测试 用 例 设计 模式 。 

根据 测试 用 例 设 计 模 式 生成 的 测试 用 例 的 数量 一 般 都 是 比较 大 的 ,为 了 实现 测试 资源 
有 效 的 条 件 下 选择 关键 的 测试 用 例 设 计 模 式 , 需 要 确定 测试 用 例 设 计 模 式 的 选择 策略 。 在 
制定 测试 用 例 选 择 策略 时 ,采用 定性 与 定量 相 结合 的 方法 。 

(1) 测试 用 例 设 计 模 式 定性 分 析 。 在 确定 选择 策略 时 ,首先 进行 定性 分 析 获 得 最 小 割 
集 , 在 定性 分 析 的 基础 上 ,可 根据 下 列 原则 选择 测试 用 例 设计 模式 : 
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@ 阶 数 越 小 的 最 小 割 集 越 重要 ,应 将 阶 数 最 小 的 最 小 割 集 纳 入 测试 用 例 设 计 模式 集 ; 

Q@ 在 不 同 最 小 割 集 中 ,重复 出 现 次 数 越 多 的 底 事 件 越 重 要 ,应 将 这 些 底 事件 涉及 的 最 
小 割 集 纳 入 测试 用 例 设 计 模式 集 ; 

@ 在 低 阶 最 小 割 集 中 出 现 的 底 事 件 比 高 阶 最 小 割 集中 的 底 事 件 重要 ,应 将 最 小 阶 数 最 
小 割 集 中 的 底 事件 涉及 的 最 小 割 集 纳入 测试 用 例 设 计 模式 集 。 

(2) 测试 用 例 设 计 模式 定量 分 析 。 测 试用 例 设 计 模 式 选择 策略 ,可 以 对 最 小 割 集 的 重 
要 程度 进行 定量 分 析 ,通过 分 析 故 障 树 中 每 个 底 事件 在 故障 树 中 的 结构 重要 度 ,进行 测试 用 
例 设计 模式 的 选择 。 每 个 底 事 件 在 故障 树 中 的 结构 重要 度 计 算 方 法 如 下 : 

= 2 [G(s RK) — B01 X)] /2 一 

其 中 ,I 为 第 i 个 根 节点 的 重要 度 ,n 为 所 含 节 点 的 数量 ,@(1,X) 为 第 ;个 节点 为 "1 时 系 
统 的 状态 ,B(0;,X) 为 第 i 个 节点 为 “0" 时 系统 的 状态 。 


6.7.4 应 用 实例 


(1) 获取 软件 故障 树 。 在 某 软 件 测试 中 ,获得 了 如 图 6-3 所 示 的 软件 故障 树 ,其 中 中 间 
事件 “未 关机 ”的 发 生 是 由 Ggjxl,Ggjx2,Ggjx3 中 的 任意 两 个 以 上 发 生 时 导致 的 。 根 据 这 
种 情况 ,可 将 图 6-3 改造 为 如 图 6-4 所 示 的 等 效 软件 故障 树 。 
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图 6-3 软件 故障 树 











(2) 求 出 割 集 为 {T2fcl, T2fc2, T2fc3), {Ggjxl, Ggjx2}, {Ggjxl, Ggjx3}, {Gegjx2, 
Ggjx3}, {Luwo}, {Ggjxl ,Ggjx2.Ggjx3), {Luwo, T2fcl}, {Luwo, T2fc2), {Luwo, T2fc3), 

(3) 求 出 最 小 割 集 为 {Ggjxl, Ggjx2). {Ggjxl, Ggjx3), {Ggjx2, Ggjx3), {Luwo})， 
{T2fcl ,T2fc2,T2fc3} 。 

(4) 根据 输入 条 件 的 等 价 类 划分 原则 :设置 输入 的 典型 值 如 表 6-6 所 示 。 
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图 6-4 改造 后 的 软件 故障 树 


表 6-6 典型 值 设计 





参数 名 典 型 值 
Gegjxl 有 效 值 .无 效 值 
Gegjx2 有 效 值 .无 效 值 
Gegjx3 有 效 值 ,无 效 值 
T2fcl 有 效 值 ,无 效 值 
T2fc2 有 效 值 .无效 值 
T2fc3 有 效 值 .无效 值 


Luwo 


有 效 值 .上 越界 ,下 越界 ,上 边界 ,下 边界 


(5) 生成 测试 用 例 。 基 于 制 集 生成 的 测试 用 例 有 63 个 ,而 基于 最 小 割 集 生 成 的 测试 用 
例 只 有 25 个 。 利 用 测试 用 例 自动 生成 工具 生成 的 基于 最 小 割 集 {T2fcl,T2fc2,T2fc3} 的 测 
试用 例 集合 如 图 6-5 所 示 。 











[有 效 值 (72fe1) 、 有 效 值 (72fc2) 、 有 效 值 (T2fc3) 
有 效 值 (T2fc1) 、 有 效 值 (T2fc2)、 无 效 值 (T2fc3) 
(T2fcl)、 (T2fc2) 、 (T2fc3) 








有 效 值 (T2£c1) 、 无 效 值 72fc2)、 无 效 值 (T2fc3) 
T2fc1、T2fc2、T2fc3 | 元 获 值 GT2EeTJ 有 效 值 (T2Efc2) 有 歼 值 (T2Ec57 





无 效 值 (T2fcl1) 、 有 效 值 (T2fc2)、 无 效 值 (T2fc3) 
(T2fcl)、 〔(T2fc2) 、 (T2fc3) 
无 效 值 (T2fcl) 、 无 效 值 T2fc2)、 无 效 值 (T2fc3) 





图 6-5 ”基于 最 小 割 集 生成 的 测试 用 例 示 例 
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6.8 配置 项 测试 过 程 


软件 配置 项 测试 依据 软件 需求 文档 ,按照 如 图 6-6 所 示 过 程 开 展 测试 ,配置 项 测试 过 程 
分 为 4 个 阶段 。 


测试 策划 多 (a) 


测试 策划 配置 项 测试 计划 


88 (Ce) -全 
frr (9 a 


测试 环境 准备 配置 项 测试 环境 


mn RET (ev a 


配置 项 测试 记录 
配置 项 测试 问题 报告 


测试 总 结 内 
测试 总 结 配置 项 测试 报告 


图 6-6 软件 配置 项 测试 过 程 示意 图 


(1) 配 蜀 项 测试 策划 。 依 据 软件 需求 文档 进行 配置 项 测试 策划 ,软件 需求 文档 包括 软 
件 研 制 任务 书 、 软 件 需 求 规格 说 明 接口 需求 规格 说 明和 软件 用 户 手册 ,制定 软件 配 辕 项 测 
试 计划 。 

(2) 配置 项 测试 设计 与 实现 。 依 据 软 件 需求 文档 软件 配置 项 测试 计划 设计 配 团 项 测 
试用 例 , 开 发 必要 的 配 管 项 测试 程序 。 

(3) 配 力 项 测试 执行 。 按 照 软件 配 管 项 测试 计划 ,测试 说 明明 确 的 测试 策略 、 测 试 环 
境 , 执 行 测试 用 例 , 记 录 实 测 结果 和 测试 过 程 出 现 的 问题 。 当 软件 问题 修改 后 还 需要 进行 回 
归 测 试 。 

(4) 配置 项 测试 总 结 。 根 据 实 测 结果 ,期望 结果 和 评估 准则 分 析 测试 数据 ,形成 测试 报 
告 。 测 试 报告 完成 后 ,应 对 整个 配置 项 测试 的 情况 .文档 等 进行 评审 .以 确保 配 团 项 测试 的 
有 效 性 。 





测试 设计 与 实现 
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6.8.1 测试 策划 


为 了 保证 软件 研制 进度 ,一 般 情况 下 ,可 在 软件 需求 分 析 完 成 后 即 开展 软件 配置 项 测试 
策划 ,测试 设计 与 实现 工作 。 完 成 配置 项 测试 策划 工作 时 ,应 编写 软件 配置 项 测试 计划 。 

目前 ,软件 研发 项 目 在 配置 项 测试 方面 还 存在 着 许多 问题 。 主 要 表现 在 以 下 3 个 方面 : 

(1) 对 配置 项 测试 的 重要 性 认识 不 足 ; 

(2) 配置 项 测试 开始 较 晚 ,大 部 分 项 目 受 资源 限制 ,在 整个 项 目 编码 和 单元 测试 结束 后 
才 开始 进行 配置 项 测试 ,没有 根据 配置 项 测试 策略 ,分 步骤 、 分 阶段 地 进行 配置 项 测试 工作 ， 

(3) 配 管 项 测试 用 例 设计 不 够 全 面 ,大 部 分 问题 主要 表现 在 ,只 关注 了 配置 项 的 软件 功 
能 ,未 充分 覆盖 软件 接口 ,另外 ,很 少 考虑 异常 情况 的 测试 。 

因此 ,为 了 达到 质量 、 进 度 、 效 率 的 平衡 .应 在 配置 项 测试 策划 时 考虑 如 下 因素 : 

(1) 软件 的 质量 要 求 ; 

(2) 软件 研制 的 进度 安排 ; 

(3) 软件 测试 的 优先 级 ; 

(4) 测试 资源 的 限制 。 

配置 项 测试 策划 的 内 容 如 下 。 

(1) 按照 软件 需求 和 软件 质量 要 求 确定 软件 配置 项 测试 的 需求 。 包 括 : 

吕 被 测 软件 名 称 、 标 识 ; 

@@ 采取 的 配置 项 测试 策略 ; 

@ 明确 需要 进行 的 测试 类 型 ; 

@ 明确 每 个 测试 类 型 下 的 测试 项 ; 

@@ 提出 每 个 配 辆 项 的 测试 方法 ; 

@ 提出 配置 项 测试 的 充分 性 要 求 ; 

@ 测试 终止 条 件 ; 

@ 优先 级 ; 

@ 对 软件 需求 文档 的 追踪 关系 。 

(2) 提出 配置 项 测试 环境 要 求 , 包 括 测 试 所 需 的 测试 程序 等 。 

(3) 提出 配置 项 测试 人 员 安 排 。 

(4) 安排 配置 项 测试 的 进度 计划 。 应 依据 测试 需求 ,测试 环境 .人 员 等 情况 ,制定 合理 
可 行 的 软件 配置 项 测试 进度 计划 。 

(5) 制定 配 团 项 测试 通过 的 准则 。 配 置 项 测试 通过 的 准则 如 下 : 

@ 配 剖 项 的 软件 功能 、 性 能 ,接口 等 需求 与 软件 需求 一 致 

@ 配 壮 项 测试 发 现 的 问题 得 到 修改 并 通过 回归 测试 ; 

@ 满足 配置 项 测试 终止 条 件 ; 

@ 配 剖 项 测试 报告 通过 评审 。 

配置 项 测试 策划 完成 时 ,应 编写 软件 配置 项 测试 计划 。 配 置 项 测试 计划 是 否 合理 可 行 、 
是 否 满足 充分 性 要 求 等 需要 进行 验证 ,因此 .应 对 软件 配置 项 测试 计划 进行 评审 。 评 审 的 主 
要 内 容 包括 : 


第 6 章 配置 项 测试 


(1) 测试 人 员 组 成 合理 、 分 工 明确 ; 

(2) 配置 项 测试 策略 恰当 ， 

(3) 配置 项 测试 方法 可 行 ; 

(4) 测试 通过 的 准则 满足 软件 质量 要 求 ; 

(5) 测试 类 型 ,测试 项 覆盖 软件 需求 文档 和 其 他 软件 质量 要 求 ; 
(6) 测试 资源 满足 配置 项 测试 需求 ; 

(7) 建立 软件 配置 项 测试 项 (条 目 ) 到 软件 需求 文档 之 间 的 追踪 关系 。 





6.8.2 测试 设计 与 实现 


配置 项 测试 设计 与 实现 阶段 的 主要 工作 是 依据 软件 需求 文档 和 配置 项 测试 计划 ,进行 
配置 项 测试 用 例 的 设计 ,并 完成 必要 的 配置 项 测试 环境 的 建立 和 验证 。 配 置 项 测试 设计 与 
实现 阶段 完成 时 ,应 编写 配置 项 测试 说 明 .配置 项 测试 所 需 测 试 环境 和 测试 环境 验证 情况 
报告 。 


1. 设计 配置 项 测试 用 例 

在 进行 配置 项 测试 用 例 设 计时 ,应 遵循 如 下 原则 : 

(1) 应 针对 软件 配置 项 测试 计划 中 提出 的 测试 项 进行 测试 用 例 设 计 ， 

(2) 测试 软件 需求 覆盖 率 应 达到 100% ,如 果 存 在 无 法 覆盖 的 情况 ,应 说 明 原 因 ， 
(3) 测试 用 例 的 输入 应 至 少 包括 有 效 等 价 类 值 、 无 效 等 价 类 值 和 边界 值 ; 

(4) 测试 步骤 应 明确 .具体 

(5) 测试 数据 应 说 明 数 据 的 主要 特征 ; 

(6) 应 明确 测试 评估 准则 ,必要 时 说 明 误差 范围 。 


2. 建立 配置 项 测试 环境 

配置 项 测试 时 ,往往 会 遇 到 目标 运行 环境 还 不 完备 的 情况 。 因 此 :建立 配 辕 项 测试 环境 
时 ,需要 考虑 这 些 风险 ,尽早 制定 缓解 措施 和 应 急 计 划 ,以 保证 配置 项 测试 工作 的 顺利 实施 。 

在 条 件 允 许 的 情况 下 ,应 尽 可 能 使 用 目标 运行 环境 以 保证 配 辕 项 测试 的 有 效 性 。 如 果 
确实 无 法 使 用 真实 环境 ,建立 的 仿真 环境 需要 经 过 认真 分 析 和 确认 ,保证 与 真实 环境 的 等 
效 性 。 


3. 测试 就 绪 评 审 

为 了 保证 配置 项 测试 的 充分 性 ,需要 对 配置 项 测试 计划 、 说 明和 测试 环境 就 绪 情况 进行 
评审 ,评审 的 内 容 包括 : 

(1) 配 辆 项 测试 策略 是 否 恰 当 ; 

(2) 测试 类 型 和 测试 项 是 否 充分 ; 

(3) 测试 项 是 否 包括 了 测试 终止 要 求 ; 

(4) 是 否 充分 考虑 了 配置 项 测试 可 能 的 风险 ,缓解 和 应 急 计划 是 否 恰当 ; 

(5) 测试 说 明 是 否 完整 .正确 和 规范 ; 

(6) 测试 设计 是 否 完整 和 合理 ; 

(7) 测试 用 例 是 否 可 行 和 充分 ; 
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(8) 通过 比较 测试 环境 与 软件 真实 运行 的 软件 和 硬件 环境 的 差异 ,审查 测试 环境 要 求 
是 否 正 确 合理 、 满 足 测 试 要 求 ; 
(9) 文档 是 否 符 合 规定 的 要 求 。 


6. 8.3 测试 执行 


配置 项 测试 执行 活动 是 依据 配置 项 测试 计划 与 测试 说 明 , 按 测试 执行 顺序 进行 配 蜀 项 
测试 ,记录 实际 的 测试 结果 。 当 发 现 问题 时 ,应 进行 分 析 , 如 果 是 测试 的 问题 ,应 根据 实际 情 
况 调 整 测试 计划 和 说 明 , 补 充 相应 的 测试 ;如 果 是 软件 的 问题 ,应 如 实 、 详 细 地 记录 测试 结 
果 , 并 提交 问题 报告 。 问 题 报告 中 应 详细 描述 问题 现象 ,问题 类 型 和 级 别 , 给 出 改进 意见 及 
建议 ,为 随后 的 问题 定位 和 解决 提供 支持 。 

如 果 软 件 进行 了 更 改 , 应 进行 相应 的 回归 测试 。 回 归 测试 的 详细 内 容 参见 第 8 章 的 
介绍 。 


6.8.4 测试 总 结 


软件 配置 项 测试 完成 后 ,应 对 配置 项 测试 工作 进行 总 结 ,以便 评 估 软 件 配置 项 测试 中 的 
问题 是 否 得 到 解决 ,配置 项 测试 工作 是 否 到 达 充 分 性 要 求 。 测 试 结 果 分 析 总 结 应 写 入 软件 
测试 报告 ,并 应 进行 测试 报告 评审 。 


1. 配置 项 测试 分 析 总 结 

配置 项 测试 分 析 总 结 的 内 容 如 下 。 

(1) 对 配置 项 测试 过 程 进行 总 结 。 应 对 配置 项 测试 策划 ,测试 设计 与 实现 测试 执行 过 
程 进行 总 结 ,说 明 在 各 过 程 中 开展 的 主要 工作 参与 人 员 和 工作 完成 情况 。 

(2) 对 配置 项 测试 方法 进行 说 明 。 应 说 明 配 置 项 测试 所 采用 的 测试 方法 与 策略 ,并 说 
明 采 用 这 些 方法 的 依据 。 

(3) 对 配置 项 测试 环境 进行 分 析 。 应 说 明 配置 项 测试 所 使 用 的 测试 环境 ,包括 测试 工 
有 具 、 测 试 程序 的 情况 ,并 对 测试 环境 的 差异 性 进行 分 析 , 说 明 测试 环境 是 否 满足 配置 项 测试 
的 要 求 。 

(4) 对 配置 项 测试 结果 进行 分 析 。 配 置 项 测试 结果 的 分 析 , 应 包括 对 测试 执行 过 程 以 
及 所 有 回归 测试 情况 的 分 析 。 主 要 内 容 包括 : 

@ 测试 时 间 ， 

加 测试 人 员 ; 

@ 测试 用 例 执行 情况 .内 容 包 括 测 试用 例 数 、 通 过 的 测试 用 例 、 未 通过 的 测试 用 例 、 完 
全 执行 的 测试 用 例 , 未 完全 执行 的 测试 用 例 、 未 执行 的 测试 用 例 ; 

@ 测试 覆盖 情况 .包括 对 功能 、 性 能 、 接 口 等 需求 覆盖 情况 .说 明 是 否 满足 测试 充分 性 
要 求 ; 

回 说 明 配 置 项 测试 过 程 中 发 现 的 问题 ,并 对 问题 解决 情况 进行 说 明 ; 

@ 对 软件 的 整体 情况 进行 评价 ,并 提出 改进 的 意见 及 建议 ; 

@ 如 果 软 件 中 存在 遗留 问题 应 进行 说 明 。 


2. 配置 项 测试 总 结 评审 
配置 项 测试 总 结 评审 的 内 容 包括 : 
(1) 审查 测试 文档 与 记录 内 容 的 完整 性 、 正 确 性 和 规范 性 ; 
(2) 审查 测试 活动 的 有 效 性 ; | 
(3) 审查 测试 环境 是 否 符合 测试 要 求 ; 
(4) 审查 软件 测试 报告 与 软件 测试 原始 记录 和 问题 报告 的 一 致 性 ; 
(5) 审查 实际 测试 过 程 与 测试 计划 和 测试 说 明 的 一 致 性 ; 
(6) 审查 测试 说 明 评 审 的 有 效 性 ,例如 是 否 评审 了 测试 项 选择 的 完整 性 和 合理 性 、 测 试 
用 例 的 可 行 性 和 充分 性 ; 
(7) 审查 测试 结果 的 真实 性 和 准确 性 ; 
(8) 审查 对 遗留 问题 是 否 有 有 效 的 处 理 措施 。 
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系统 测试 


系统 测试 是 对 完成 集成 的 系统 ,包括 软件 和 硬件 ,在 实际 运行 环境 下 作为 一 个 整体 进行 
的 测试 。 系 统 测 试 是 软件 产品 交付 前 进行 的 最 后 确认 ,确保 交付 的 软件 产品 满足 用 户 的 需 
求 。 系 统 测试 根据 系统 的 研制 任务 书 、 系 统 需 求 规格 说 明 、 用 户 手册 等 进行 测试 ,确保 系统 
满足 用 户 的 要 求 , 符 合 系统 规格 说 明 中 定义 的 各 项 需求 。 同 时 ,系统 研制 任务 书 、 系 统 需 求 
规格 说 明 、 软 件 实体 、 软 件 用 户 手 册 应 文 文 相 符 、 文 实 一 致 。 


7.1 概述 


7.1.1 系统 测试 的 定义 


系统 测试 的 对 象 是 通过 集成 的 整个 系统 。 

系统 测试 一 般 情况 下 ,应 依据 系统 研制 要 求 、 系 统 / 子 系统 规格 说 明 、 系 统 / 子 系 统 设计 
说 明 ,接口 需求 规格 说 明和 用 户 手册 开展 功能 \ 性 能 、 接 口 、 强 度 、 容 量 、 余 量 、 可 靠 性 、 安 全 
性 、` 安 装 和 人 机 交互 界面 测试 等 。 必 要 时 ,可 进行 包括 文档 审查 ,以 及 恢复 性 、 互 操作 性 和 兼 
容 性 测试 等 动态 测试 。 


7.1.2 系统 测试 的 目的 


系统 测试 的 目的 主要 包括 : 

(1) 确认 系统 是 否 达 到 了 研制 任务 书 、 系 统 / 子 系统 规格 说 明 、 系 统 / 子 系统 设计 说 明 、 
接口 需求 规格 说 明 等 所 规定 的 各 项 要 求 ; 

(2) 是 否 满足 系统 验收 交付 的 要 求 。 

软件 研制 .测试 人 员 应 根据 研制 任务 书 、 系 统 / 子 系 统 规 格 说 明 、 系 统 / 子 系统 设计 说 明 、 
接口 需求 规格 说 明 等 定义 的 全 部 需求 制定 系统 测试 计划 .开展 系统 测试 工作 。 

系统 测试 与 软件 配置 项 测试 的 区 别 .主要 表现 在 以 下 3 个 方面 。 

(1) 测试 对 象 不 同 。 软 件 配置 项 测试 的 对 象 是 软件 配置 项 ,而 系统 测试 的 对 象 是 整个 
系统 ,包括 所 有 软件 和 硬件 。 

(2) 测试 的 依据 不 同 。 软 件 配置 项 测试 的 依据 是 软件 配置 项 的 研制 任务 书 和 (或 ) 需 求 
规格 说 明 接口 需求 规格 说 明和 用 户 手册 ,而 系统 测试 的 依据 是 系统 的 研制 任务 书 、 系 统 / 子 
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系统 规格 说 明 、 系 统 / 子 系统 设计 说 明 ,接口 需求 规格 说 明 等 。 

(3) 测试 内 容 存在 差异 。 软 件 配 置 项 测试 需要 考察 软件 研制 任务 书 和 (或 ) 软 件 需求 规 
格 说 明 中 描述 的 功能 、 性 能 、 接 口 (系统 外 部 接口 )、 安 全 性 ,恢复 性 和 安装 性 等 是 否 符合 要 
求 。 系 统 测试 则 关注 整个 系统 是 否 能 够 协调 一 致 地 完成 系统 规定 的 功能 \ 性 能 ,是 否 正确 实 
现 与 其 他 系统 间 的 接口 .系统 规定 的 安全 性 ,恢复 性 、 安 装 性 、 可 靠 性 、 互 操作 性 和 兼容 性 等 
是 否 符合 要 求 。 


7.1.3 系统 测试 的 重要 性 


系统 测试 是 软件 与 系统 完整 结合 后 的 测试 ,是 产品 交付 前 最 后 的 测试 ,也 是 最 为 重要 的 
测试 活动 之 一 ,其 重要 性 主要 表现 在 以 下 5 个 方面 。 

(1) 软件 第 一 次 完整 地 与 硬件 相 结 合 开展 的 测试 。 

(2) 通过 系统 测试 可 以 发 现 软件 是 否 遗 漏 了 系统 研制 任务 书 、 系 统 / 子 系统 规格 说 明 、 
系统 / 子 系统 设计 说 明 、 接 口 需求 规格 说 明 等 需求 。 

(3) 一 般 情 况 下 ,用 户 将 参与 系统 测试 活动 ,例如 : 测试 就 绪 评 审 、 测 试 执行 等 ,使 软件 
完成 的 功能 ,性 能 等 得 到 用 户 的 确认 ,保证 软件 交付 的 顺利 进行 。 

(4) 系统 测试 关注 的 是 整个 系统 是 否 满足 用 户 的 要 求 。 系 统 测试 可 以 发 现 与 其 他 系统 
的 接口 .用户 使 用 界面 性能、 安全 性 、 安 装 性 等 与 用 户 直 接 相关 的 问题 ,避免 在 交付 后 系统 
出 现 较 大 的 问题 。 

(5) 系统 测试 在 真实 环境 下 开展 .对 整个 系统 完成 的 需求 进行 考察 ,可 以 有 效 避 免 在 交 
付 后 出 现 系统 的 不 协调 问题 。 


7.2 系统 测试 原则 


为 保证 系统 测试 充分 和 有 效 ,在 进行 系统 测试 时 ,应 遵循 以 下 原则 : 

(1) 系统 测试 的 依据 是 系统 研制 要 求 、 系 统 / 子 系统 规格 说 明 、 系 统 / 子 系统 设计 说 明 、 
接口 需求 规格 说 明 等 规定 的 功能 、 性 能 、 接 口 、 安 全 保密 性 等 特性 ; 

(2) 功能 覆盖 率 、 性 能 和 接口 覆盖 率 应 达到 100% ; 

(3) 系统 的 每 个 特性 一 般 应 被 一 个 正常 测试 用 例 和 一 个 异常 测试 用 例 覆 盖 ; 

(4) 测试 用 例 的 输入 一 般 应 覆盖 有 效 值 ,无效 值 和 边界 值 ; 

(5) 应 测试 系统 的 输出 及 其 格式 ; 

(6) 应 测试 运行 条 件 在 边界 状态 和 异常 状态 下 .或 在 人 为 设 定 的 状态 下 ,系统 的 功能 和 
性 能 ; 

(7) 应 测试 系统 的 全 部 存储 量 、 输 入 /输出 通道 和 处 理 时 间 的 余 量 ; 

(8) 应 按照 系统 研制 要 求 、 系 统 / 子 系统 规格 说 明 、 系 统 / 子 系统 设计 说 明 的 要 求 .对 系 
统 的 功能 .性 能 进行 强度 测试 ; 

(9) 应 测试 系统 中 用 于 提高 系统 安全 性 .可靠 性 的 结构 .算法 以 及 用 于 容错 、 宛 余 . 中 断 
处 理 等 方案 ; 


软件 测试 实用 方法 与 技术 


(10) 对 安全 关键 的 系统 ,应 对 每 一 个 危险 状态 和 导致 危险 的 可 能 原因 进行 针对 性 
测试 ; 

(11) 对 有 恢复 或 重 管 功 能 需求 的 系统 ,应 测试 其 恢复 或 重 管 功能 和 平均 恢复 时 间 , 应 
对 每 一 类 导致 恢复 或 重 管 的 情况 进行 测试 ; 

(12) 对 不 同 的 实际 问题 应 外 加 相应 的 专门 测试 ; 

(13) 测试 人 员 应 尽 可 能 地 与 开发 人 员 分 离 ; 

(14) 系统 测试 过 程 中 应 有 用 户 或 用 户 代表 的 参与 。 


7.3 系统 测试 环境 


系统 测试 一 般 需要 在 目标 环境 下 进行 。 如 果 有 测试 内 容 无 法 使 用 实际 的 运行 环境 时 ， 
可 以 使 用 有 效 的 仿真 环境 进行 系统 测试 。 但 是 .应 对 仿真 环境 与 实际 运行 环境 的 差异 进行 
分 析 ,确保 仿真 环境 与 实际 运行 环境 是 等 效 的 。 另 外 ,系统 测试 需要 使 用 一 些 专用 工具 , 甚 
至 需要 开发 一 些 数据 仿真 和 数据 获取 工具 才能 完成 相应 的 测试 。 

系统 测试 环境 的 建立 可 以 从 以 下 4 个 方面 考虑 。 

(1) 硬件 环境 。 系 统 测试 环境 应 与 实际 运行 环境 一 致 。 建 立 系统 测试 环境 时 ,应 按照 
系统 研制 要 求 中 规定 的 系统 运行 硬件 环境 建立 系统 测试 环境 。 特 别 应 关注 硬件 环境 的 各 项 
指标 是 否 与 实际 环境 一 致 。 

(2) 操作 系统 环境 。 由 于 整个 系统 中 软件 可 能 运行 在 多 个 操作 系统 下 ,因此 在 进行 系 
统 测试 时 ,需要 充分 考虑 软件 运行 环境 中 操作 系统 的 要 求 。 应 关注 操作 系统 的 版 本 应 与 系 
统 研制 要 求 保持 一 致 。 

(3) 数据 库 环 境 。 目 前 以 数据 库 为 基础 的 信息 系统 非常 普遍 ,因此 在 进行 系统 测试 时 需 
要 根据 系统 研制 要 求 中 规定 的 数据 库 环境 要 求 ,建立 系统 测试 环境 。 这 是 因为 不 同 的 数据 库 
系统 .不同 数据 库 系 统 版 本 的 性 能 、 容 量 都 存在 不 同 .在 系统 测试 时 要 尤其 关注 这 部 分 内 容 。 

(4) 网 络 环 境 。 网 络 环 境 是 影响 系统 性 能 等 的 关键 因素 ,因此 在 进行 系统 测试 时 ,应 按 
照 研 制 要 求 采用 实际 的 网 络 环境 。 


7.4 系统 测试 策略 


系统 测试 一 般 采 用 黑 盒 测试 技术 .系统 测试 的 依据 是 系统 研制 要 求 、 系 统 / 子 系统 需求 
规格 说 明 、 系 统 / 子 系统 设计 说 明 、 接 口 需 求 规格 说 明和 用 户 手 册 等 。 

系统 测试 的 输入 一 般 通 过 仿真 程序 或 通过 界面 等 注入 ,输出 一 般 也 需要 测试 程序 或 显 
示 界 面 获取 ,对 测试 结果 的 分 析 . 有 时 需要 使 用 相应 的 工具 进行 。 

进行 系统 测试 应 具备 以 下 基本 条 件 : 

(1) 具有 系统 研制 要 求 、 系 统 / 子 系统 需求 规格 说 明 、 系 统 / 子 系统 设计 说 明 、 接 口 需 求 
规格 说 明和 用 户 手 册 等 ; 

(2) 已 完成 系统 的 集成 测试 ; 
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(3) 系统 中 所 有 软件 配置 项 已 进入 配置 管理 库 进行 管理 ; 

(4) 系统 源 代 码 通 过 编译 或 汇编 ; 

(5) 系统 测试 通常 需要 进行 功能 测试 ,性 能 测试 .接口 测试 .人 机 交互 界面 测试 .强度 测 
试 、 余 量 测试 .安全 性 测试 ,恢复 性 测试 ,边界 测试 .数据 处 理 测试 .安装 性 测试 和 容量 测试 ， 
有 时 还 需要 进行 可 靠 性 、 互 操作 性 和 兼容 性 测试 .具体 的 测试 类 型 需 根据 系统 需求 确定 。 


7.5 系统 测试 内 容 


系统 测试 的 内 容 应 根据 系统 研制 要 求 、 系 统 / 子 系统 需求 规格 说 明 、 系 统 / 子 系统 设计 说 
明和 接口 需求 规格 说 明 等 中 的 要 求 确定 ,一 般 情况 下 应 包括 如 下 内 容 : 

(1) 系统 研制 要 求 、 系 统 / 子 系统 需求 规格 说 明 中 定义 的 功能 ,性 能 和 安全 保密 性 需求 ; 

(2) 系统 / 子 系统 设计 说 明和 接口 需求 规格 说 明 中 定义 的 系统 内 部 接口 和 外 部 接口 ， 

(3) 应 测试 系统 运行 在 边界 状态 和 异常 状态 下 ,系统 的 功能 和 性 能 ; 

(4) 应 测试 系统 的 全 部 存储 量 、 输 入 /输出 通道 和 处 理 时 间 的 余 量 ; 

(5) 应 按照 系统 / 子 系 统 规格 说 明和 (或 ) 设 计 说 明 的 要 求 ,对 系统 的 功能 、 性 能 进行 强 
度 测试 ; 

(6) 应 测试 系统 中 用 于 提高 系统 安全 性 、 可 靠 性 的 结构 .算法 ,以 及 容错 、 宛 余 、 中 断 处 
理 等 方案 ; 

(7) 对 安全 关键 的 系统 ,应 在 安全 性 分 析 的 基础 上 对 每 一 个 危险 状态 和 导致 危险 的 可 
能 原因 进行 针对 性 测试 ; 

(8) 对 有 恢复 或 重演 功能 需求 的 系统 .应 测试 其 恢复 或 重 管 功 能 和 平均 恢复 时 间 , 并 上 且 
对 每 一 类 导致 恢复 或 重 兽 的 情况 进行 测试 ; 

(9) 对 系统 的 其 他 需求 进行 专门 测试 。 


7.6 系统 测试 方法 


系统 测试 一 般 采 用 黑 盒 测试 技术 ,主要 是 验证 系统 是 否 满足 系统 研制 要 求 、 系 统 / 子 系 
统 规格 说 明 、 系 统 / 子 系统 设计 说 明和 接口 需求 规格 说 明 等 要 求 。 系 统 测试 一 般 要 完成 功 
能 \ 性 能 ,接口 、 强 度 、 容 量 、 余 量 、 可 靠 性 、 安 全 性 ,安装 和 人 机 交互 界面 测试 等 。 必 要 时 ,可 
进行 包括 文档 审查 ,以 及 恢复 性 ` 互 操作 性 和 兼容 性 测试 等 动态 测试 。 其 中 大 部 分 测试 方法 
在 第 6 章 中 已 有 说 明 。 本 节 重 点 对 可 靠 性 . 互 操作 性 和 兼容 性 测试 进行 说 明 。 


7.6.1 可 靠 性 测试 
可 靠 性 测试 是 在 真实 的 或 仿真 的 环境 中 ,运用 建 模 、 统 计 、 试 验 、 分 析 和 评价 等 手段 对 软 


件 可 靠 性 实施 的 测试 。 通 过 可 靠 性 测试 可 以 发 现 并 纠正 软件 的 缺陷 ,提高 软件 的 可 靠 性 ,并 
评估 研制 软件 是 否 达 到 了 用 户 的 可 靠 性 要 求 。 
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可 靠 性 测试 一 般 采 用 黑 盒 测试 方法 ,需要 按照 运行 /操作 剖面 进行 测试 用 例 设 计 。 测 试 
目的 是 发 现 影响 软件 可 靠 性 的 缺陷 ,实现 软件 可 靠 





































































性 的 提高 ,验证 软件 是 否 达 到 可 靠 性 要 求 .并 估计 有 
软件 可 靠 性 水 平 。 可 靠 性 测试 环境 包括 实验 室 仿 | 
真 环境 和 现场 使 用 环境 。 一 般 情况 下 ,可靠 性 测试 运行/ 操作 剖面 构造 
在 系统 测试 中 进行 。 
软件 可 靠 性 测试 流程 如 图 7-1 所 示 , 包 括 可靠 i 号 
性 测试 需求 分 析 、 运 行 /操作 剖面 构造 .测试 用 例 设 
计 、 测 试 场景 设计 、 测 试 环 境 和 工具 的 准备 .可 靠 性 ! 
测试 实施 .可靠 性 分 析 与 预测 等 。 测试 场景 设计 
1 测试 技术 要 求 ] 由 
可 靠 性 测试 的 一 般 要 求 为 : 测试 环境 和 工具 的 准备 试 
(1) 可 靠 性 测试 环境 应 与 典型 使 用 环境 的 统计 
特性 相 一 致 ,必要 时 使 用 测试 平台 ; 1 
(2) 定义 软件 失效 等 级 ,建立 软件 运行 剖面 / 操 a 
作 剖面 ， ! 
(3) 测试 记录 更 为 详细 ,准确 ,应 记录 失效 现象 结果 分 析 
和 时 间 ; 


(4) 必须 保证 输入 覆盖 ,应 覆盖 重要 的 输入 变 
量 值 ( 所 有 被 测 输入 值 域 的 概率 之 和 必须 大 于 软件 


未 达到 目标 


可 靠 性 要 求 ) 各 种 使 用 功能 .相关 输入 变量 可 能 组 满足 目标 

aa 
(5) 对 于 可 能 导致 软件 运行 方式 改变 的 一 些 边 

界 条 件 和 环境 条 件 ,必须 进行 有 针对 性 的 测试 。 图 7-1 软件 可 靠 性 测试 流程 
2. 实施 要 点 


1) 可 靠 性 测试 需求 分 析 

可 靠 性 测试 需求 分 析 包 括 定义 软件 失效 等 级 .明确 可 靠 性 测试 需求 和 选择 可 靠 性 模型 。 

(1) 定义 软件 失效 等 级 。 软 件 失 效 等 级 的 划分 可 按照 软件 失效 后 造成 的 影响 分 为 5 
级 ,失效 等 级 定义 见 表 7-1。 


表 7-1 软件 失效 等 级 定义 











失效 等 级 | 定义 | 说 明 
1 级 : 关键 性 失效 整个 系统 终止 或 数据 库 严 重 损坏 | 网 各， 宕 机 、 蓝 屏 
2 级 , 严重 性 失效 重要 功能 无 法 正常 运行 ,并 且 没有 替代 的 运行 方式 | 例如 , 程序 错误 








绝 大 部 分 功能 仍然 可 用 ,次 要 功能 受到 限制 或 要 采 
用 蔡 代 方式 


4 级 : 轻微 失效 少数 功能 在 有 限 的 操作 中 受到 限制 | 例如 : 界面 不 规范 


3 级 : 普通 失效 | | 全 如: 打 和 功能 铺 训 








5 级 : 可 忽略 的 失效 影响 未 波及 最 终 用 户 
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(2) 明确 可 靠 性 测试 需求 。 一 般 情况 下 ,软件 可 靠 性 需求 包括 : 

@ 软件 能 够 进行 的 容错 处 理 . 能 够 防止 的 误 操作 和 对 错误 数据 进行 一 定 的 处 理 ; | 

@ 软件 的 自动 恢复 能 力 ; 

@ 软件 无 故障 运行 时 间或 无 故障 操作 的 次 数 。 

(3) 选择 可 靠 性 模型 。 可 靠 性 模型 应 尽早 确定 ,在 选择 可 靠 性 模型 时 应 考虑 以 下 因素 : 

中 选择 比较 成 熟 、 应 用 范围 较 广 的 模型 作为 分 析 模 型 ,例如 马尔 科 夫 模型 ; 

@ 模型 的 输出 值 应 满足 软件 可 靠 性 需求 ; 

@ 模型 需要 的 数据 在 软件 中 应 易于 收集 ; 

外 数据 的 输入 能 够 通过 测试 工具 获取 。 

2) 运行 /操作 剖面 构造 

软件 可 靠 性 测试 的 最 突出 特点 是 按照 用 户 实 际 使 用 软件 的 方式 来 进行 测试 ,软件 的 运 
行 /操作 剖面 是 定量 描述 用 户 实际 使 用 软件 的 方法 。 该 方法 需要 充分 分 析 用 户 使 用 软件 各 
种 模式 和 功能 ,以 及 相应 的 输入 ,还 需要 分 析 用 户 使 用 软件 这 些 模 式 和 功能 的 概率 。 这 些 信 
息 的 获取 需要 对 系统 研制 要 求 、 系 统 / 子 系统 需求 规格 说 明 、 系 统 / 子 系统 设计 说 明和 接口 需 
求 文档 等 进行 充分 分 析 。 因 此 .需要 测试 人 员 与 软件 开发 人 员 、 用 户 进行 充分 有效 地 沟通 ， 
搜集 系统 实际 使 用 的 历史 数据 信息 并 进行 分 析 。 系 统 工作 模式 和 功能 划分 越 完整 , 概 率 越 
准确 ,建立 的 运行 /操作 剖面 就 越 符合 实际 情况 ,基于 此 进行 的 可 靠 性 测试 ,得 出 的 可 靠 性 评 
估 和 预测 的 结果 就 越 有 价值 。 软 件 运行 /操作 剖面 图 可 按照 以 下 3 个 步骤 获得 : 

(1) 建立 用 户 使 用 方式 与 功能 之 间 的 关系 图 ,如 图 7-2 所 示 。 


用 户 使 用 方式 


(0. 3 (0. 3) (0. 2 (0. a (0. 分 (0.3) 


图 7-2 用 户 使 用 方式 与 功能 示意 图 











(2) 建立 功能 与 操作 之 间 的 关系 图 ,如 图 7-3 所 示 。 
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图 7-3 功能 与 操作 之 间 关 系 示 意图 


















































(3) 获得 运行 /操作 剖面 :如 图 7-4 所 示 。 
3) 可 靠 性 测试 用 例 设 计 
可 靠 性 测试 用 例 设 计时 ,可 根据 软件 运行 /操作 剖面 ,确定 功能 使 用 的 频率 来 进行 有 重 
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操作 1 a] 区 
(0.175)| |(0.175)| |(0.126) 
































操作 4 可 操作 6 | | 操作 7 | a 操作 9 
(0.084) | | (0230)| | (0.036)| |(0089)| | (0.018)| | (0.072) 


图 7-4 获取 可 靠 性 测试 运行 /操作 剖面 





点 的 测试 ,更 真实 地 反映 软件 实际 使 用 中 的 情况 ,使 软件 得 到 更 加 充分 地 测试 。 可 靠 性 测试 
用 例 设计 时 ,需要 根据 对 输入 数据 范围 ,以 及 输入 数据 之 间 的 相互 关系 的 分 析 来 进行 设计 。 
另外 ,应 对 功能 较为 复杂 的 模块 设计 更 多 的 测试 用 例 ,以 保证 测试 的 充分 性 。 

4) 测试 场景 设计 

测试 场景 设计 可 根据 如 下 步骤 进行 : 

(1) 分 析 软 件 失效 模式 ,确定 关键 的 失效 模式 ; 

(2) 确定 软件 实际 应 用 中 的 业务 流程 ; 

(3) 估算 同时 运行 软件 的 用 户 数 量 ; 

(4) 设计 用 户 启动 或 退出 软件 的 时 间 ; 

(5) 设计 测试 执行 周期 ,确定 可 靠 性 测试 执行 周期 和 测试 时 间 。 

5) 测试 环境 和 工具 

测试 环境 和 工具 的 准备 主要 包括 : 

(1) 软件 运行 所 需 的 软 /硬件 环境 和 网 络 环境 ; 

(2) 测试 工具 所 需 的 软 /硬件 环境 和 网 络 环境 ; 

(3) 测试 场景 所 需 的 软 /硬件 环境 和 网 络 环境 ; 

(4) 测试 数据 。 

6) 测试 实施 

可 靠 性 测试 实施 与 其 他 测试 类 型 基本 相同 ,注意 需要 根据 可 靠 性 数据 规范 和 记录 方法 
记录 测试 数据 ,例如 时 间 、 失 效 、 失 效 等 级 等 信息 。 

7) 数据 分 析 

可 靠 性 数据 分 析 主 要 包括 失效 分 析 和 可 靠 性 分 析 。 

(1) 失效 分 析 时 ,根据 运行 结果 判断 软件 是 否 失效 ,以 及 失效 的 程度 后果、 原因 等 。 通 
过 失效 分 析 , 找 到 并 纠正 引起 失效 的 故障 ,实现 软件 可 靠 性 的 增长 。 

(2) 可 靠 性 分 析 主 要 是 指 根据 失效 数据 ,估计 软件 的 可 靠 性 水 平 ,预计 可 能 达到 的 水 
平 , 评 价 软 件 是 否 达 到 要 求 的 可 靠 性 水 平 。 可 靠 性 分 析 包 括 : 失效 密度 、 失 效 解 决 率 、 故 障 
密度 、 潜 在 故障 率 、 故 障 排除 率 ,、 测 试 覆 盖 率 、 测 试 通过 率 、 平 均 失 效 间 隔 时 间 、 有 效 服务 时 间 
率 、 累 计 有 效 服务 时 间 、 避 免 宕 机 率 、 避 免 失 效率 、 防 误 操作 率 , 平 均 宕 机 时 间 , 平 均 恢 复 时 
间 、 易 修复 性 ,修复 有 效 性 等 ,具体 的 分 析 方 法 可 参见 GB/T 29832. 3 一 2013《 系 统 与 软件 可 
靠 性 第 3 部 分 : 测试 方法 》。 


7.6.2 互 操作 性 测试 


互 操作 性 测试 是 为 验证 不 同 软件 之 间 的 互 操作 能 力 而 进行 的 测试 。 


1. 测试 技术 要 求 
互 操作 性 测试 一 般 针 对 以 下 情况 进行 测试 : 
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(1) 同时 运行 两 个 或 多 个 不 同 的 软件 ; 
(2) 软件 之 间 发 生 了 互 操作 。 


2. 实施 方法 要 点 

(1) 互 操作 测试 时 , 须 同时 运行 两 个 或 多 个 不 同 的 软件 , 且 软 件 之 间 进 行 了 交互 操作 。 
例如 : 在 某 系统 中 ,应 用 程序 S1 初始 化 时 ,应 用 程序 S2 发 "检查 好 ”消息 ,Sl 收 到 后 向 S2 
发 “ 读 取 数据 1” 命 令 ,S2 向 Sl 发 送 当前 数据 1,S1 将 S2 发 送 的 数据 1 进行 处 理 , 并 向 S2 发 
送 “ 读 取 数 据 2 ”命令 ,S2 向 Sl 发 送 当前 数据 2,S1 将 S2 发 送 的 数据 2 进行 处 理 , 并 完成 软 
件 初始 化 。 

(2) 应 对 正常 的 互 操作 流程 进行 测试 。 

(3) 应 对 互 操作 流程 中 可 能 出 现 的 异常 情况 进行 测试 ,例如 应 对 接口 格式 错误 、 数 据 异 
常 ,流程 异常 等 进行 测试 。 





7.6.3 兼容 性 测试 


兼容 性 测试 主要 是 验证 被 测 软件 不 同 版 本 之 间 的 兼容 性 。 有 两 类 基本 的 兼容 性 测试 
向 下 兼容 和 交错 兼容 。 向 下 兼容 是 测试 软件 新 版 本 保留 它 早 期 版 本 的 功能 的 情况 ,交错 兼 
容 测试 是 要 验证 共同 存在 的 两 个 相关 但 不 同 的 产品 之 间 的 兼容 性 。 验 证 软件 在 规定 条 件 下 
共同 使 用 若干 个 实体 ,或 实现 数据 格式 转换 时 ,能 满足 相关 要 求 的 测试 。 

兼容 性 测试 验证 被 测 软件 与 其 他 软 / 硬 件 相互 是 否 能 够 正确 交互 和 实现 信息 共享 。 这 
种 交互 可 能 是 跨 平 台 的 .通过 网 络 进 行 异地 交互 .例如 微 信 、QQ 等 。 兼 容 性 测试 需要 考虑 
被 测 软件 与 硬件 的 兼容 性 .与 其 他 软件 平台 和 应 用 程序 的 兼容 性 以 及 数据 共享 的 兼容 性 。 


1. 测试 技术 要 求 

兼容 性 测试 一 般 需 要 验证 : 

(1) 验证 软件 在 规定 条 件 下 ,共同 使 用 若干 个 实体 时 满足 有 关 要 求 的 能 力 ， 

(2) 验证 软件 在 规定 条 件 下 ,与 若干 个 实体 实现 数据 格式 转换 时 能 满足 有 关 要 求 的 
能 力 。 


2. 实施 要 点 

(1) 与 硬件 的 兼容 性 测试 。 这 项 测试 内 容 主 要 针对 通用 软件 ,被 测 软件 在 研制 过 程 中 
应 考虑 与 各 类 硬件 的 兼容 性 。 测 试 时 主要 从 以 下 3 个 方面 考虑 : 

@ 硬件 类 型 方面 :例如 如 果 是 网 络 应 用 软件 ,应 进行 多 种 网 络 配置 的 测试 ,如 果 是 图 形 
应 用 软件 ,应 进行 各 种 显示 器 .显卡 和 声卡 的 测试 ; 

回 硬件 型 号 和 驱动 程序 方面 ,针对 每 种 硬件 类 型 应 选择 主流 型 号 进行 测试 ,例如 对 于 
驱动 程序 ,应 对 操作 系统 自 带 的 驱动 程序 .硬件 自 带 的 驱动 程序 .以 及 官方 网 站 提供 的 驱动 
程序 进行 测试 ; 

@ 硬件 特性 、 模 式 和 选项 方面 :应 对 每 种 硬件 的 模式 和 选项 进行 测试 .应 考虑 最 低 配置 
和 推荐 配置 选项 。 

(2) 与 其 他 软件 平台 和 应 用 程序 的 兼容 性 测试 。 这 类 测试 可 从 以 下 方面 进行 : 

中 向 前 和 向 后 兼容 : 向 前 兼容 则 是 指 被 测 软件 应 与 其 后 续 版 本 保持 兼容 性 ,但 一 般 软 
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件 很 难 做 到 ,这 需要 被 测 软件 预 留 相应 的 接口 ;向 后 兼容 指 被 测 软件 与 其 以 前 版 本 的 兼容 
性 ,例如 采用 旧版 本 保存 的 数据 ,在 新 版 本 中 应 该 能 够 正常 使 用 。 

@ 多 个 应 用 程序 的 兼容 性 测试 : 一 般 情况 下 ,软件 不 可 能 独立 存在 ,因此 需要 对 与 其 
他 应 用 程序 的 兼容 性 进行 测试 ,可 根据 软件 的 种 类 、 使 用 频 度 等 因素 ,选择 与 被 测 软件 交互 
比较 密切 ,重要 的 应 用 程序 进行 测试 ,同时 需要 考虑 对 这 些 应 用 程序 的 不 同 版 本 兼容 性 的 
测试 。 

(3) 数据 共享 兼容 性 测试 。 在 对 被 测 软件 进行 数据 共享 方面 的 测试 时 ,应 从 以 下 4 个 
方面 进行 测试 : 

.文件 应 能 正常 保存 和 读 取 ; 

@ 文件 应 能 正确 导入 和 导出 ; 

@ 能 支持 剪 切 、 复 制 和 粘贴 ; 

@ 支持 被 测 软件 不 同 版 本 间 的 数据 转换 , 对 转换 前 后 的 数据 进行 比较 分析, 确保 数据 
不 改变 业务 需求 ,能 处 理 数据 中 相互 矛盾 的 地 方 , 特 别 应 支持 数据 转换 不 成 功 时 ,应 不 破坏 
原 有 数据 。 


7.7 系统 测试 用 例 设 计 


7.7.1 概述 


系统 测试 应 根据 对 系统 研制 要 求 , 系 统 / 子 系统 需求 规格 说 明 ,系统 / 子 系统 设计 说 明和 
接口 需求 规格 说 明 的 分 析 结 果 ,确定 系统 测试 类 型 ,系统 测试 一 般 应 包括 功能 性能、 接口 、 
强度 、 容 量 、 余 量 、 可 靠 性 、 安 全 性 ,安装 和 人 机 交互 界面 测试 等 。 必 要 时 ,可 包括 文档 审查 ， 
以 及 恢复 性 ` 互 操作 性 和 兼容 性 测试 等 动态 测试 。 在 此 基础 上 ,分 析 系 统 测试 项 ,设计 相应 
的 测试 用 例 。 

(1) 在 进行 系统 测试 用 例 设 计时 ,应 站 在 系统 层面 \ 用 户 角 度 考 虑 测试 用 例 , 可 以 按照 
用 户 使 用 模式 .系统 工作 模式 设计 测试 用 例 。 

(2) 在 进行 系统 测试 接口 测试 时 ,不 仅 要 关注 内 部 接口 测试 ,更 要 关注 外 部 接口 的 测 
试 。 内 部 接口 一 般 情 况 下 在 集成 测试 .配置 项 测试 时 都 给 予 了 重点 测试 ,因此 系统 测试 应 将 
重点 放 在 系统 外 部 接口 的 测试 上 ,特别 应 对 外 部 接口 的 异常 进行 重点 测试 。 

(3) 在 对 系统 的 强度 、 容 量 、 余 量 、 安 装 等 进行 测试 时 ,需要 在 系统 实际 的 运行 环境 中 进 
行 ,系统 的 软 / 硬 件 环境 都 应 与 实际 环境 一 致 

(4) 在 进行 系统 的 安全 性 测试 时 ,可 根据 第 6 章 中 介绍 的 方法 进行 安全 性 分 析 ,并 在 其 
基础 上 进行 安全 性 测试 用 例 设 计 。 

(5) 可 靠 性 测试 是 较为 困难 的 测试 ,对 高 可 靠 性 要 求 的 系统 进行 可 靠 性 测试 时 ,需要 采 
用 专门 的 可 靠 性 测试 方法 ,可 以 参考 7. 6. 1 节 介 绍 的 方法 。 

(6) 对 有 恢复 功能 的 系统 进行 恢复 性 测试 时 .可 参考 第 6 章 介绍 的 内 容 。 在 设计 恢复 
性 测试 用 例 时 .应 考虑 以 下 5 点 : 

a 分析 系统 潜在 的 危险 和 系统 恢复 机 制 ; 
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@ 针对 每 一 种 危险 状态 设计 相应 的 测试 用 例 . 验 证 系统 的 恢复 机 制 是 否 正确 ; 

@ 模式 的 危险 应 与 实际 可 能 发 生 的 危险 一 致 ; 

@ 应 仔细 检查 恢复 机 制 是 否 能 够 记录 系统 发 生 危 险 前 的 状态 ,是 否 能 够 从 该 点 恢复 系 
统 运 行 ; 

加 恢复 性 测试 的 例子 包括 是 否 能 够 恢复 备份 的 文件 ,恢复 部 分 文件 或 恢复 数据 到 系统 
危险 前 的 状态 ,系统 恢复 后 是 否 能 够 接续 系统 发 生 和 危险 前 的 状态 继续 执行 , 双 工 切换 是 否 能 
够 正确 执行 ,恢复 处 理 日 志方 面 的 能 力 是 否 符合 要 求 。 

对 大 规模 安全 依 关 系统 ,开展 系统 测试 是 工程 实践 中 的 一 个 难题 。 本 节 结 合 工程 实例 ， 
提出 了 一 种 基于 形式 化 模型 的 系统 测试 用 例 设 计 方 法 。 首先 ,对 软件 功能 .性 能 、 接 口 等 进 
行 抽象 ,给 出 系统 的 形式 化 定义 ;其 次 ,提出 线索 分 析 的 不 同 策略 ,识别 系统 测试 需求 ;然后 ， 
开展 系统 的 流程 阶段 和 场景 分 析 , 建 立 可 刻画 系统 级 行为 的 场景 树 模型 ;最 后 ,提出 基于 场 
景 树 模型 的 测试 覆盖 准则 ,给 出 形式 化 静态 检查 和 动态 测试 用 例 生成 方法 ,生成 测试 用 例 集 
合 。 另 外 ,结合 某 基 于 地 理 信息 的 安 控 判 决 系统 进行 实例 分 析 和 方法 描述 ,给 出 了 实例 验证 
和 分 析 结 果 。 


7.7.2 系统 形式 化 模型 


1. 形式 化 基础 

大 规模 安全 依 关 系统 一 般 由 多 个 软件 配置 项 组 成 ,配置 项 之 间 存 在 数据 交换 或 互 操作 
关系 ,各 配置 项 相互 配合 实现 系统 级 的 功能 ,并 满足 所 要 求 的 性 能 指标 和 其 他 质量 要 求 。 

定义 1( 功 能 FUNC) FUNC= (func_Name,IO。.IO。 ,RS ,RSou) 称 为 软件 的 功能 ， 
其 中 : func_Name 表示 功能 名 称 ;IO% 二 {pi ,pis，… ,pim) (m 宇 0) 表 示 功 能 的 输入 ,IOow 二 
{por，pos，"…，pon) (n 宇 0) 表 示 功 能 的 输出 ,pi; 表示 输入 参数 , po 表示 输出 参数 ;RS 表示 
输入 的 约束 集 ,RS 表示 输出 的 约束 集 。 

定义 2( 性 能 PERF) ” PERF 二 (perf_Name,{(c,cv))) 称 为 软件 的 性 能 ,其 中 : perf_ 
Name 表示 性 能 名 称 ; (c,cv) ECXCV,C= {a ,cs，…,cr) 为 表示 性 能 的 指标 集合 ,CV 一 
{eviscvs，"* ,cvs)(n 宇 0) 为 表示 性 能 指标 的 取 值 范围 集合 .cv; 可 表示 为 Lmin,max],min 为 
下 限 ,max 为 上 限 。 

定义 3( 接 口 INTF) INTF==(intf_Name,sour,dest,pt, DT) 称 为 软件 的 接口 ,其 中 : 
intf_Name 表示 接口 名 称 ;sour 表示 接口 的 源 地 址 ;dest 表示 接口 的 目的 地 址 ;pt 表示 接口 
的 协议 类 型 ;DT={dt ,dt ,….dt} (三 0) 表 示 接 口 的 数据 元 素 集合 。 

定义 4( 配 置 CONF) CONEF= (conf _Name.{(Casav))) 称 为 软件 的 配置 .其 中 : conf_ 
Name 表示 配置 名 称 ;(a,av)EAXxAV,A={a.a,…'a}(2 三 0) 表示 配置 的 属性 集合 ， 
AV={aviyav,…'avs}( 三 0) 表示 配置 属性 的 取 值 集合 。 

定义 5( 软 件 配 置 项 CSCI) CSCI= (csci_ Name, FUNC™, PERFss, INTFee ， 
CONF" ) 称 为 软件 配置 项 ,其 中 : csci_Name 表示 软件 配置 项 的 名 称 ; FUNC™ ,PERF” ， 
INTF™ ,CONF™ 分 别 表示 软件 配置 项 的 功能 、 性 能 、 接 口 和 配置 的 集合 。 

定义 6( 系 统 SS) SS 二 (ss_Name,FUNC*,PERF*,INTF*,CONF*,CSCD ,其 中 : 
ss_Name 表示 系统 的 名 称 ;FUNC* ,PERF* .INTF* ,CONF* 分 别 表示 系统 的 功能 、 性 能 、 接 
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口 和 配置 的 集合 ,CSCI 表示 系统 所 包含 的 软件 配置 项 的 集合 。 需 要 说 明 的 是 ,系统 在 包含 
软件 配置 项 集合 的 同时 ,还 具有 自己 独立 的 功能 性能、 接口 和 配置 等 。 
由 此 ,大 规模 安全 依 关 系统 的 静态 结构 图 可 以 形式 化 地 表示 成 如 图 7-5 所 示 的 样子 。 


SS 








Re 


图 7-5 系统 形式 化 结构 图 











2. 线索 分 析 

与 软件 配置 项 相 比 , 系 统 级 的 功能 、 性 能、 接口 和 配置 等 信息 经 常 是 不 明显 的 ,特别 是 在 
缺少 系统 级 的 规格 说 明 时 .它们 都 隐 含 地 分 布 在 各 个 软件 配置 项 的 规格 说 明 或 接口 文档 
之 中 。 

系统 测试 的 测试 需求 分 析 的 难点 就 在 于 识别 系统 级 的 功能 、 性 能 .接口 和 配置 。 线 索 分 
析 方 法 能 够 辅助 测试 人 员 解 决 这 个 问题 。 

定义 7( 系 统 线索 ST) ”ST 称 为 系统 线索 , 指 的 是 在 系统 层面 上 可 观测 的 从 系统 输入 
到 系统 输出 的 映射 关系 的 一 个 实例 。 从 广义 上 讲 ,系统 本 身 就 是 从 输入 到 输出 的 一 个 映射 
关系 ,尽管 这 个 映射 关系 的 内 容 对 系统 测试 人 员 来 讲 可 能 是 未 知 的 。 

对 大 规模 安全 依 关 系统 开展 系统 线索 分 析 ,主要 有 以 下 4 种 策略 : 

(1) 基于 输入 进行 线索 分 析 。 这 里 的 输入 包括 系统 界面 或 端口 的 输入 数据 和 用 户 操作 
等 。 设 计 某 种 输入 的 覆盖 指标 , 比如 遍历 每 个 界面 的 各 种 输入 组 合 (很 难 实现 ) 或 者 覆盖 常 
见 操作 ,快捷 操作 和 异常 操作 序列 等 .根据 指标 要 求 设计 系统 输入 ,进而 识别 系统 功能 和 
场景 。 

(2) 基于 输出 进行 线索 分 析 。 这 里 的 输出 包括 系统 界面 或 端口 的 输入 数据 和 信息 显示 
等 。 设 计 某 种 输出 的 覆盖 指标 ,比如 遍历 每 种 系统 输出 .根据 指标 要 求 尝试 设计 相应 系统 输 
入 ,进而 识别 系统 功能 和 场景 。 

(3) 基于 界面 或 端口 进行 线索 分 析 。 在 每 个 界面 (或 端口 ) 检 查 哪些 操作 (或 数据 ) 会 出 
现 , 然 后 根据 每 个 界面 (或 端口 ) 的 操作 (或 数据 ) 列 表 查 找 系统 线索 。 从 某 种 意义 上 ,基于 输 
入 的 线索 分 析 覆 盖 了 从 输入 到 用 户 界面 的 一 对 多 联系 ,而 基于 界面 的 线索 分 析 覆 盖 了 从 界 
面 到 输入 的 一 对 多 联系 ,可 看 作 是 对 基于 输入 的 线索 分 析 的 有 益 补充 。 

(4) 基于 数据 进行 线索 分 析 。 设 计 对 数据 的 覆盖 指标 .然后 根据 该 指标 进行 线索 分 析 。 
基于 数据 进行 线索 分 析 主 要 针对 转换 式 ( 而 不 是 反应 式 ) 系 统 , 这 种 系统 支持 以 数据 库 为 基 
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础 的 事务 处 理 。 利 用 数据 及 数据 之 间 的 关系 进行 线索 分 析 可 产生 很 多 有 意思 的 系统 测试 | | 
线索 。 

利用 线索 分 析 方 法 能 够 有 效 地 辅助 识别 系统 级 的 功能 、 性 能 、 接 口 和 配置 等 信息 ,进而 
建立 场景 树 。 


3. 场景 树 模 型 

软件 系统 在 某 个 指定 时 刻 , 将 处 于 某 个 可 知 的 状态 , 它 会 调用 一 个 或 多 个 系统 功能 ,并 
通过 系统 功能 连接 一 个 或 多 个 的 系统 接口 . 即 开启 系统 的 一 个 场景 。 

场景 树 是 本 书 形式 化 模型 的 核心 。 在 场景 树 之 前 ,首先 给 出 场景 和 事件 的 定义 。 

定义 8( 场 景 A) A 二 (FUNC,) 称 为 软件 系统 运行 中 的 场景 ,其 中 FUNC, 表示 系统 运 
行 到 上 时 刻 时 可 调用 的 FUNC 的 集合 .集合 中 可 包含 0 个 、1 个 或 多 个 FUNC。 

定义 9( 事 件 E) EE= (Event_Name,PC,FUNC,PF) 称 为 般 发 场景 切换 的 事件 ,其 中 : 
Event_Name 表示 事件 名 称 ;PC 表示 事件 的 前 置 条 件 集合 , 当前 置 条 件 为 真 时 ,事件 将 被 触 
发 ;FUNC 表示 该 事件 触发 的 功能 集合 ,PF 为 功能 对 应 的 参数 集合 。 

系统 的 执行 过 程 可 看 作 是 大 量 场景 的 有 序 序列 ,从 一 个 场景 经 由 事件 触发 切换 到 另 一 
个 场景 。 在 场景 的 切换 流程 中 ,由 于 事件 参数 的 不 同 ,调用 不 同 的 功能 ,进而 产生 不 同 的 流 
转 方向 ,因此 可 以 用 场景 树 来 描述 各 场景 及 其 切换 关系 。 在 初始 场景 确定 的 情况 下 ,系统 的 
执行 过 程 也 可 看 作 是 一 系列 事件 的 有 序 序列 。 

定义 10( 场 景 树 AT) AT=(A,ao,E,RAE) 称 为 描述 各 场景 及 其 切换 关系 的 场景 树 ， 
其 中 : A 是 场景 的 集合 ,a€ A 是 系统 的 一 个 场景 , 称 为 场景 树 的 一 个 节点 ;aoEA 为 初始 场 
景 ; 尼 为 事件 的 集合 ,包含 触发 场景 切换 的 各 个 事件 ;RA.sSAXAX 天 表示 场景 的 切换 关系 
集合 。 如 果 存 在 一 个 切换 关系 (an ,a.,e)E Rae 使 得 从 场景 ay 切换 到 场景 a., 则 称 an 为 a。 
的 父 节 点 ,ae 为 ay 的 子 节 点 ,e 为 触发 该 场景 切换 的 事件 。 

下 面 以 基于 地 理 信息 的 安 控 判 决 系统 (简称 : 地 理 安 控 系 统 ) 为 例 ,建立 其 场景 树 。 首 
先 简单 介绍 地 理 安 控 系 统 的 功能 和 运行 流程 。 

地 理 安 控 系 统 的 主要 功能 是 提供 地 形 .地 瑶 .城市 人口 ,交通 枢纽 .重要 设施 等 地 理 信 
息 , 显 示 飞 行 器 飞行 过 程 的 测量 态势 .空间 态势 、 安 控 态 势 .姿态 变化 .运动 趋势 等 试验 状态 ， 
为 方案 制定 \ 安 控 实施 、 态 势 掌控 等 提供 决策 依据 。 地 理 安 控 系统 共 包 含 地 理 信息 存储 与 管 
理 .试验 信息 存储 与 管理 .仿真 与 分 析 . 安 控 判 决 处 理 、. 实 时 数据 收发 和 综合 态势 显示 等 6 个 
软件 配置 项 。 

地 理 安 控 系统 的 运行 流程 是 : 首先 ,分 别 由 地 理 信 息 存 储 与 管理 .试验 信息 存储 与 管理 
配置 项 提供 地 理 信息 .试验 信息 等 系统 配置 信息 ,由 仿真 与 分 析 配 置 项 生成 安全 管道 理论 数 
据 ,进行 系统 的 初始 配置 ;在 配置 完成 后 ,系统 进入 实时 处 理 状 态 ,开始 进行 实时 数据 接收 和 
发 送 :每 当 接收 到 实时 数据 后 ,由 安 控 判 决 处 理 软件 进行 数据 处 理 , 然 后 把 处 理 结果 送 综合 
态势 显示 配 轩 项 显示 ,同时 进行 试验 信息 存储 ;任务 结束 后 ,由 仿真 与 分 析 配 置 项 开展 试验 
数据 事后 分 析 。 

根据 地 理 安 控 系 统 的 运行 流程 .绘制 运行 流程 图 ,如 图 7-6 所 示 ; 然 后 开展 阶段 分 析 , 建 
立地 理 安 控 系 统 阶段 分 析 图 ,如 图 7-7 所 示 。 

结合 线索 分 析 技 术 . 基 于 运行 流程 图 和 阶段 分 析 图 ,绘制 地 理 安 控 系 统 的 场景 树 图 ,如 
图 7-8 所 示 。 
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7-6 地理 安 控 系 统 运行 流程 图 





地 理 信息 存储 与 管理 配置 项 
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实时 数据 收发 配置 项 








综合 态势 显示 配置 项 











系统 配置 阶段 实时 处 理 阶段 事后 分 析 阶 段 


图 7-7 地 理 安 控 系 统 阶段 分 析 图 


7.7.3 基于 模型 的 系统 测试 


基于 模型 的 系统 测试 包括 静态 配置 一 致 性 检查 和 动态 测试 。 


1. 静态 配置 一 致 性 检查 

配置 一 致 性 检查 是 对 系统 配置 信息 进行 确认 的 手段 .目的 是 保证 当前 的 配置 信息 与 任 
务 或 系统 需求 是 一 致 的 。 配 置 一 致 性 检查 一 般 在 动态 测试 前 开展 .也 可 单独 开展 。 

配置 一 致 性 检查 的 做 法 是 把 系统 的 配置 信息 与 给 定 的 标准 配置 进行 比 对 ,检查 其 是 否 
符合 配置 一 致 性 的 要 求 。 

对 于 两 个 配置 conf 一 (confNamel ,{(ai'avi))) 和 con 一 (confNames,{(Caisav))) ,其 
中 (aavEAXAV 和 (aav)EAsXAvVs, 如 果 同 时 满足 以 下 4 个 条 件 . 称 conf 和 conf 
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是 一 致 的 ( 记 为 conf 一 一 conf: ): @D confNamel 一 confNamez; @Ail=A,; @AVi=AV,; 
图 对 任 一 (eavD)EAXAVi ,存在 (ai'av)EA:XAV:, 使 得 wu 一 aiyavi 一 avi。 否 则 ,conf' 
和 conf: 不 一 致 , 记 为 confi ! 一 conf: 。 

配置 一 致 性 检查 的 流程 如 图 7-9 所 示 ,其 中 标准 配置 集 ST 是 预先 存储 的 包含 完整 的 、 
标准 软件 配置 信息 的 配置 数据 集 。 一 种 简单 的 实现 算法 如 算法 1 所 示 。 








图 7-9 配置 一 致 性 静态 检查 流程 图 
算法 1: 静态 配置 一 致 性 检查 算法 





配置 一 致 性 检查 是 一 种 静态 测试 方法 ,能 够 为 系统 运行 提供 一 个 可 信 的 静态 环境 ,保障 
动态 测试 结果 的 有 效 性 与 正确 性 。 


2. 动态 测试 用 例 的 生成 

参考 基于 路 径 的 覆盖 测试 准则 .提出 基于 形式 化 模型 的 系统 测试 的 覆盖 准则 。 首 先 给 
出 覆盖 的 定义 。 

定义 11 称 场景 a 被 测试 用 例 集 工 覆盖, 如果 对 “ 包含 的 任 一 功能 ,存在 工 的 测试 用 
例子 集 TS 了 ,满足 对 该 功能 的 测试 充分 性 要 求 。 
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定义 12 称 事件 e 被 测试 用 例 集 T 覆盖 .如果 对 。 触发 的 任 一 场景 切换 ,存在 全 的 测 
试用 例子 集 TST, 满 足 对 该 场景 切换 情形 的 测试 充分 性 要 求 。 

对 于 一 个 系统 SS ,基于 其 场景 树 AT 而 生成 的 测试 用 例 集 合 工 应 满足 以 下 准则 : 

(1) (节点 覆盖 准则 ?测试 用 例 集 工 满 足 节点 覆盖 准则 , 当 且 仅 当 对 场景 树 AT 中 的 任 
一 场景 ( 即 节 点 ,叶子 )a, 存 在 测试 用 例子 集 六 三 工 .使 得 < 被 了 覆盖 ; 

(2)( 边 覆盖 准则 ) 测 试用 例 集 工 满足 边 覆盖 准则 , 当 且 仅 当 对 场景 树 AT 中 任 一 事件 
( 即 边 ,每 两 个 节点 间 的 树枝 )e, 存 在 测试 用 例子 集 TST, 使 得 。 被 T" 和 覆盖 。 

容易 证 明 , 满 足 节点 覆盖 和 边 覆 盖 的 测试 用 例 集 就 满足 如 下 定义 的 路 径 覆 盖 : 测试 用 
例 集 工 满足 路 径 覆 盖 准 则 , 当 且 仅 当 对 场景 树 AT 中 任 一 从 根 节点 ( 即 起 始 场景 ) 到 叶 节 点 
的 路 径 ( 包 含 其 上 所 有 节点 和 任意 两 个 节点 间 的 边 )route, 测 试用 例 集 工 能 够 覆盖 route 上 
的 所 有 场景 和 事件 。 

前 面 讲 过 ,系统 的 执行 过 程 是 一 系列 场景 的 有 序 序 列 , 也 可 看 作 是 一 系列 事件 的 有 序 序 
列 , 因 此 采用 深度 优先 遍历 方法 生成 测试 用 例 集 ,主要 思想 是 ; 对 场景 树 的 任 一 节点 ( 即 场 
景 0) ,设计 覆盖 该 节点 对 应 路 径 的 一 组 测试 用 例 , 如 果 该 节点 为 叶 节点 , 则 将 这 一 组 测试 用 
例 添 加 到 测试 用 例 集 合 中 ,并 设置 该 节点 的 状态 为 已 过 历 ;否则 (该 节点 为 父 节 点 ), 则 从 该 
节点 未 被 遍历 的 子 节点 中 选取 一 个 节点 wm ,并 从 a 出 发 进行 深度 优先 遍历 。 基 于 场景 树 的 
动态 测试 如 图 7-10 所 示 。 下 面 给 出 测试 用 例 生成 算法 。 















系统 需求 分 析 系统 设计 | ------ 




















运行 流程 图 


线索 分 析 


图 7-10 基于 场景 树 的 动态 测试 
算法 2: 动态 测试 用 例 生 成 算法 
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inti =0; 

while( (i<root.countOfChildren) && (root.child[i] .visited ==false) ) 
{ 

CreatTestCaseSet (root .child[i], caseArray); 

了 二 二 





统 为 例 , 对 该 方法 进行 了 验证 。 前 面 已 经 介绍 了 地 理 安 控 系统 的 主要 功 
能 和 作用 ,绘制 了 地 理 安 控 系 统 的 运行 流程 图 、 阶 段 分 析 图 ,并 基于 运行 流程 图 和 阶段 分 析 
图 ,绘制 了 地 理 安 控 系 统 的 场景 树 图 (图 7-8) ,这 里 不 再 歼 述 。 

基于 场景 树 图 ,遵循 节点 覆盖 和 边 覆 盖 准 则 , 共 对 地 理 安 控 系统 设计 测试 用 例 252 个 ， 
形成 测试 用 例 集合 。 测 试用 例 的 分 布 如 表 7-2 所 示 。 执 行 测试 用 例 共 发 现 各 种 软件 缺陷 57 
个 ,缺陷 分 布 情况 如 表 7-3 所 示 ,缺陷 分 类 统计 如 表 7-4 所 示 。 
表 7-2 ”测试 用 例 分 布 一 览 表 


























































用 例 关注 点 用 例 数 量 用 例 占 比 
信息 存储 与 管理 48 19.05% 
试验 信息 存储 与 管理 21 8.33% 
仿真 与 分 析 27 10.71% 
安 控 判决 处 理 32 12.70% 
实时 数据 收发 22 
36 
其 他 (综合 流程 .系统 接口 .性 能 等 66 
合计 252 100% 
表 7-3 软件 缺陷 分 布 一 览 表 
缺陷 位 置 缺陷 数量 缺陷 占 比 
地 理 信息 存储 与 管理 16 28.07% 
存储 与 管理 8 14.04% 
仿真 与 分 析 16 28.07% 
安 控 判 决 处 理 0 0.00% 
实时 数据 收发 7 12.28% 
态势 显示 4 7.02% 
其 他 (综合 流程 .系统 接口 .性 能 等 ) 6 10. 53% 
合计 57 100% 
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表 7-4 软件 缺陷 分 类 统计 表 


























> 小 计 
程序 错误 | 35 
文档 错误 0 2 | 2 
设计 错误 1 15 | 16 
其 他 错误 | 4 

小 计 





从 表 7-2 得 出 如 下 结论 : 

(1) 除 地 理 信 息 存 储 与 管理 外 ,测试 用 例 数量 分 布 情况 与 地 理 安 控 系统 各 功能 部 分 的 
比重 大 致 相当 。 

(2) 地 理 信 息 存 储 与 管理 的 测试 用 例 所 占 比 例 偏 大 ,是 由 于 存在 较 多 的 信息 录入 、 标 
绘 .编辑 等 人 机 交互 ,而 根据 线索 分 析 的 策略 ,这 些 人 机 交互 属于 测试 中 应 该 检查 的 内 容 。 

(3) 其 他 (综合 流程 、 系 统 接口 ,性 能 等 ) 方 面 的 用 例 占 比 接近 三 成 , 略 低 于 系统 测试 的 
预期 ,主要 是 由 于 地 理 安 控 系统 相对 独立 功能 占 比较 大 ,例如 地 理 信息 存储 与 管理 ,试验 信 
息 存 储 与 管理 ,仿真 与 分 析 部 分 中 的 系统 配置 功能 ,仿真 与 分 析 部 分 的 事后 分 析 功 能 等 。 

从 表 7-3、 表 7-4 可 以 得 出 如 下 结论 : 

(1) 缺陷 数目 及 分 布 情况 与 预期 相符 。 地 理 安 控 系统 的 安 控 判 决 处 理 .综合 态势 显示 
等 功能 部 分 是 从 已 有 软件 改造 而 来 的 ,相对 成 熟 ,缺陷 较 少 ;地 理 信息 存储 与 管理 .仿真 与 分 
析 等 功能 部 分 是 新 研 的 .缺陷 较 多 。 

(2) 其 他 方面 (综合 流程 、 系 统 接口 .性 能 等 ) 的 缺陷 较 少 ,是 由 于 地 理 安 控 系 统 各 软件 
配置 项 通过 网 络 数据 帧 方式 进行 信息 交换 ,部 分 缺陷 已 反映 在 实时 数据 收发 功能 中 。 

(3) 从 缺陷 的 严重 等 级 看 ,地 理 安 控 系 统 的 缺陷 级 别 普遍 较 低 ,没有 发 现 1 级 /2 级 的 严 
重 缺 陷 , 这 是 与 系统 的 核心 功能 部 分 继承 自己 有 软件 相关 的 。 

(4) 从 缺陷 的 类 别 看 ,程序 错误 占 比 超过 60% .设计 错误 接近 30% ,地 理 安 控 系统 应 重 
点 从 软件 设计 的 符合 性 、 编 码 实现 的 正确 性 等 方面 加 以 改进 .这 与 测试 人 员 对 该 项 目 在 配置 
管理 .过 程控 制 等 方面 的 直观 感受 相符 。 

实例 验证 结果 表明 .使 用 形式 化 技术 能 够 建立 系统 的 场景 树 模型 ,通过 所 建立 的 场景 树 
模型 能 够 有 效 帮 助 测试 人 员 了 解 系统 行为 ,识别 系统 级 功能 ,性 能 ,接口 ,进而 辅助 生成 满足 
覆盖 准则 的 系统 测试 用 例 集合 .测试 用 例 执行 结果 和 软件 缺陷 分 布 情况 符合 预期 。 地 理 安 
控 系统 在 工程 实践 中 的 实际 效果 也 印证 了 该 技术 是 可 行 的 和 有 效 的 。 

大 规模 安全 做 关系 统 的 软件 种 类 多 、 规 模 大 .软件 间 信 息 交 换 关 系 复杂 ,具有 高 安全 可 
靠 性 等 特点 。 利 用 形式 化 建 模 和 线索 分 析 方 法 建立 系统 的 场景 树 模型 ,再 以 场景 树 模型 自 
动 化 地 辅助 生成 系统 测试 的 测试 用 例 集 的 软件 测试 技术 ,能够 在 一 定 范围 内 满足 对 大 规模 
安全 依 关 系统 的 测试 需求 。 使 用 形式 化 描述 和 形式 化 模型 开展 系统 测试 具有 测试 过 程 清 
晰 ,易于 确定 测试 充分 性 准则 、 可 适用 静态 检测 以 及 易于 自动 化 实现 等 优点 ,同时 软件 形式 
化 方法 在 测试 需求 分 析 和 测试 设计 中 会 带 来 相对 较 大 的 测试 花 销 ,因此 针对 系统 关键 性 质 
或 关键 业务 部 分 地 引入 形式 化 方法 是 一 种 有 效 的 测试 途径 。 
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7.8 系统 测试 过 程 


系统 测试 过 程 与 软件 配置 项 测试 过 程 基本 一 致 ,本 节 在 6. 8 节 的 基础 上 简要 说 明 系 统 
测试 的 过 程 。 


1.， 系统 测试 策划 

(1) 依据 系统 研制 任务 书 、 系 统 设计 说 明 、 用 户 手册 、 系 统 接 口 需求 与 设计 文档 等 明确 
系统 测试 内 容 、 测 试 策略 ,制定 系统 测试 计划 。 一 般 初步 的 系统 测试 计划 在 系统 设计 阶段 就 
可 以 拟 制 , 随 着 系统 研制 的 不 断 完善 。 

(2) 提出 系统 测试 环境 的 要 求 ,包括 测试 工具 、 测 试 仿真 软件 ,结果 获取 软件 和 数据 分 
析 软 件 的 需求 。 

(3) 在 对 系统 测试 工作 量 估计 的 基础 上 ,依据 软件 研制 进度 制定 系统 测试 的 进度 安排 。 

(4) 对 系统 测试 计划 进行 评审 。 


2. 系统 测试 设计 与 实现 

(1) 依据 系统 研制 任务 书 、 系 统 设计 说 明 、 用 户 手 册 、 接 口 需求 与 设计 文档 和 系统 测试 
计划 设计 系统 测试 用 例 。 

(2) 获取 系统 测试 工具 ,开发 系统 测试 仿真 软件 .结果 获取 软件 和 数据 分 析 软 件 。 

(3) 对 系统 测试 说 明 进 行 评 审 。 

3. 系统 测试 执行 

按照 系统 测试 计划 ` 测 试 说 明 中 明确 的 测试 策略 ,测试 环境 ,执行 测试 用 例 ,记录 实测 结 
果 和 测试 过 程 出 现 的 问题 。 当 软件 问题 修改 后 还 需要 进行 系统 级 回归 测试 。 


4. 系统 测试 总 结 
根据 实测 结果 、 期 望 结 果 和 评估 准则 分 析 测 试 数据 ,形成 测试 报告 。 测 试 报告 完成 后 ， 
应 对 整个 系统 测试 的 情况 ,文档 等 进行 评审 ,以 确保 系统 测试 的 有 效 性 。 


CHAPTER 8 





回归 测试 


在 软件 研制 过 程 中 ,软件 变更 不 可 避免 ,而 变更 极 有 可 能 引入 新 的 错误 。 为 了 确认 更 动 
达到 预期 目的 ,并 且 没 有 引入 新 的 错误 ,我 们 就 应 该 对 更 动 后 的 软件 进行 回归 测试 。 对 于 目 
前 使 用 较为 广泛 的 迭代 软件 开发 模型 ,更 需要 不 断 地 进行 回归 测试 。 回 归 测 试 是 有 效 保证 
软件 质量 的 重要 手段 ,但 由 于 回归 测试 不 充分 而 导致 失败 的 例子 有 很 多 , 阿 丽 亚 娜 5 型 火箭 
发 射 失败 就 是 由 对 复 用 的 代码 未 进行 有 效 的 回归 测试 而 造成 的 。 

回归 测试 可 以 发 生 在 任何 级 别 的 测试 过 程 中 ,需要 根据 软件 变更 的 情况 采取 适合 的 测 
试 策略 和 软件 更 动 影 响 域 分 析 方 法 ,以 便 有 效 地 进行 回归 测试 用 例 的 设计 ,保证 回归 测试 的 
充分 性 及 高 效 性 。 


8.1 概述 


8.1.1 回归 测试 的 定义 


软件 回归 测试 是 软件 被 修改 或 扩充 (如 功能 增强 或 升级 ) 后 重新 进行 的 测试 ,是 为 了 验 
证 修改 后 的 软件 是 否 存在 错误 而 重新 进行 的 测试 。 在 软件 开发 过 程 中 ,软件 的 变更 可 能 是 
由 于 以 下 4 种 情况 引发 的 。 

(1) 纠 错 性 更 动 。 修 正在 测试 等 验证 确认 过 程 中 发 现 的 错误 而 进行 的 变更 ,包括 因 设 
计 错 误 ,程序 错误 .数据 错误 文档 错误 而 进行 的 纠 错 更 动 。 

(2) 适应 性 更 动 。 为 适应 软件 运行 环境 改变 而 做 的 更 动 , 包 括 因 硬 件 配 置 的 变化 .数据 
格式 或 文件 结构 的 改变 .软件 支持 环境 的 改变 而 引起 的 更 动 。 

(3) 完善 性 更 动 。 为 扩充 功能 或 改善 性 能 而 进行 的 更 动 ,包括 为 扩充 和 增强 功能 、 改 善 
性 能 、 便 于 维护 而 进行 的 更 动 。 

(4) 预防 性 更 动 。 为 防止 问题 发 生 所 进行 的 更 动 。 

由 于 软件 的 更 动 可 能 存在 以 下 问题 。 

(1) 更 动 本 身 可 能 不 正确 。 由 于 对 软件 缺陷 本 身分 析 、 定 位 存在 问题 造成 软件 更 动 本 
身 不 正确 。 根 据 数据 表明 ,多 达 一 半 的 缺陷 修复 在 回归 测试 中 没有 通过 。 

(2) 新 增 代码 实现 存在 错误 。 对 新 增 功能 的 代码 实现 未 达到 相应 要 求 。 

(3) 对 软件 其 他 部 分 造成 影响 。 由 于 对 缺陷 更 动 影响 分 析 不 到 位 ,新 增 的 模块 或 对 缺 
陷 部 分 进行 的 修改 ,都 可 能 对 原 有 正确 实现 的 模块 造成 影响 ,导致 出 现 新 的 问题 。 
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因此 ,在 进行 回归 测试 时 ,不 仅 需要 对 变更 的 部 分 进行 测试 ,证 明 其 实现 了 正确 的 修改 ， 
还 需要 补充 新 的 测试 用 例 对 新 增 代码 进行 测试 。 另 外 ,还 需要 选择 部 分 已 有 的 测试 用 例 来 
证 明 对 未 更 动 部 分 没有 引入 新 的 错误 。 

回归 测试 的 对 象 可 以 是 软件 单元 、 软 件 配 置 项 `. 子 系统 .系统 ,也 可 以 是 集成 过 程 中 的 中 
间 件 。 


8.1.2 回归 测试 的 目的 


软件 回归 测试 是 为 了 检验 是 否 成 功 修正 了 缺陷 且 是 否 会 引起 原 有 正常 功能 出 现 新 的 缺 
陷 而 进行 的 测试 。 回 归 测 试 的 目的 主要 包括 以 下 内 容 。 

(1) 验证 是 否 正确 地 解决 了 前 次 测试 所 发 现 的 问题 。 为 了 避免 开发 人 员 未 真正 修复 
软件 问题 ,应 根据 软件 更 改 的 情况 设计 相应 的 测试 用 例 , 验 证 是 否 正确 地 修改 了 存在 的 
问题 。 

(2) 验证 软件 的 变更 是 否 未 引入 新 的 问题 。 这 是 为 了 避免 软件 在 修改 过 程 中 对 原 有 正 
常 软件 部 分 造成 损坏 。 

回归 测试 的 依据 应 根据 测试 的 对 象 来 确定 ,除了 与 相应 级 别 的 测试 依据 一 致 外 ,还 需要 
依据 被 测 软件 的 更 动 说 明 ,根据 软件 的 更 动情 况 确定 测试 内 容 测试 策略 和 测试 方法 等 。 

严格 地 说 ,回归 测试 不 是 一 个 测试 阶段 , 它 可 以 用 于 单元 测试 .集成 测试 .配置 项 测试 和 
系统 测试 等 各 个 测试 过 程 。 回 归 测 试 与 其 他 级 别 测试 的 区 别 ,主要 表现 在 以 下 3 个 方面 。 

(1) 测试 对 象 不 同 。 回 归 测 试 更 多 地 关注 被 变更 的 部 分 。 

(2) 测试 的 依据 不 同 。 除 了 依据 相应 级 别 测试 所 需 的 测试 依据 外 ,还 需要 依据 软件 更 
动 说 明 ,应 根据 更 动 说 明 进 行 更 动 影响 域 分 析 ,以便 确定 软件 回归 测试 范围 。 

(3) 测试 内 容 存在 差异 。 回 归 测 试 的 内 容 主要 是 软件 变更 部 分 和 受 影响 的 部 分 ,而 各 
级 别 的 测试 则 是 相应 级 别 下 较为 全 面 的 测试 。 


8.1.3 回归 测试 的 重要 性 


软件 测试 后 发 生 更 动 在 所 难免 .在 较为 常用 的 迭代 开发 .极限 编程 和 敏捷 开发 方法 中 ， 
软件 更 动 更 会 经 常 发 生 。 更 动 可 能 带 来 程序 代码 的 修改 、 新 增 或 删除 ,而 这 些 更 动 极 有 可 能 
引入 新 的 错误 ,从 而 使 被 测 软 件 原 有 的 正常 功能 出 现 新 的 错误 。 在 重大 工程 中 因 软 件 更 动 
造成 的 重大 损失 屡见不鲜 ,导致 阿 丽 亚 娜 5 型 火箭 发 射 失败 的 软件 缺陷 就 是 由 于 复 用 的 代 
码 没有 经 过 充分 的 回归 测试 而 造成 的 。 因 此 ,为 了 发 现 更 动 后 软件 存在 的 各 种 缺陷 ,纠正 软 
件 缺 陷 , 有 效 控制 和 保证 软件 产品 质量 .就 必须 进行 充分 的 软件 回归 测试 。 

如 何在 时 间 紧 、 更 动量 大 的 情况 下 提高 回归 测试 对 更 动 验 证 的 针对 性 ,保证 回归 测试 的 
充分 性 及 高 效 性 是 摆 在 测试 者 面前 的 一 个 难题 。 为 此 .本 章 对 软件 更 动 类 型 及 特点 ,软件 回 
归 测 试 策略 ,软件 更 动 影响 域 分 析 方 法 、 回 归 测 试用 例 设计 策略 及 回归 测试 过 程 等 内 容 进 行 
了 探讨 与 说 明 。 
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8.2 回归 测试 策略 


软件 回归 测试 的 策略 总 体 上 分 为 两 种 : 一 是 将 更 动 前 测试 中 包含 的 全 部 测试 用 例 重 新 
执行 一 遍 , 并 增加 一 些 针对 新 增 功 能 的 测试 用 例 ; 二 是 根据 软件 变更 的 情况 ,对 更 动 影响 域 
进行 分 析 , 并 在 此 基础 上 ,设计 回归 测试 用 例 。 

第 一 种 回归 测试 策略 风险 最 小 ,这 种 方式 将 已 有 的 测试 用 例 与 针对 修改 或 扩充 部 分 新 
设计 的 测试 用 例 一 并 进行 完整 的 测试 。 其 优点 在 于 对 更 动 影响 域 定性 分 析 的 准确 性 要 求 较 
低 , 且 完整 的 测试 可 以 尽量 多 地 发 现 受 影响 的 部 分 ;缺点 是 虽然 遗漏 错误 的 风险 被 降 到 最 
低 , 但 是 回归 测试 预算 和 进度 的 成 本 将 大 大 增加 ,不 利于 回归 测试 活动 的 高 效 开展 。 当 被 测 
软件 受 更 动 影响 的 部 分 无 法 准确 确定 ,并 且 测 试 时 间 较 充分 时 可 采用 这 种 方式 。 

第 二 种 回归 测试 策略 是 需要 进行 准确 的 软件 更 动 影响 域 分 析 , 根 据 分 析 结 果 针 对 变更 
所 涉及 内 容 设计 相应 的 测试 用 例 并 进行 测试 。 其 优点 在 于 测试 代价 较 小 ,更 动 测试 针对 性 
强 ; 缺 点 是 对 更 动 影响 域 定性 分 析 的 准确 性 要 求 较 高 .回归 测试 的 有 效 性 、 充 分 性 难以 保障 。 

为 了 回归 测试 的 高 效 开展 ,一 般 情况 下 ,在 高 层次 的 测试 中 ,例如 集成 测试 、 配 置 项 测 
试 、 系 统 测 试 中 ,回归 测试 都 采用 第 二 种 策略 。 该 策略 是 将 回归 测试 范围 限定 于 软件 的 更 动 
影响 域 之 内 ,通过 对 软件 更 动 前 测试 的 用 例 集 合 进行 拣 择 ,选择 其 测试 范围 覆盖 更 动 影 响 域 
的 测试 用 例 集 ,并 在 此 基础 上 有 针对 性 地 增加 一 些 新 的 测试 用 例 构成 回归 测试 用 例 集合 。 
基于 这 样 的 用 例 集合 实施 回归 测试 ,是 一 种 较为 简捷 、 充 分 且 高 效 的 回归 测试 策略 。 


8.3 软件 更 动 影响 域 分 析 方 法 


在 上 述 软件 回归 测试 策略 中 ,分 析 软 件 的 更 动情 况 ,准确 识别 出 更 动 所 涉及 的 影响 域 范 
围 , 是 保证 软件 回归 测试 充分 开展 的 基础 和 重要 环节 ,因此 应 根据 软件 变更 情况 开展 有 效 的 
影响 域 分 析 , 为 回归 测试 设计 奠定 坚实 的 基础 。 更 动 影响 域 分 析 方 法 大 体 上 可 以 分 为 两 类 : 
黑 盒 测 试 更 动 影响 域 分 析 方法 和 白 盒 测试 更 动 影响 域 分 析 方法 。 


8.3.1 黑 盒 测试 更 动 影响 域 分 析 


在 黑 盒 测试 中 ,软件 更 动 类 型 可 能 包含 4 种 类 型 。 

(1) 纠 错 性 更 动 。 纠 正在 软件 开发 过 程 中 发 现 的 错误 ,包括 : 

@ 设计 错误 ; 

@ 程序 错误 ; 

@ 数据 错误 ; 

@ 文档 错误 。 

(2) 适应 性 更 动 。 为 适应 软件 运行 环境 改变 而 进行 的 更 动 . 包 括 : 
中 影响 系统 的 规则 或 规律 的 变化 ; 
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@ 硬件 配置 的 变化 ,如 机 型 、 终 端 . 外 部 设备 的 改变 等 ; 

@ 数据 格式 或 文件 结构 的 改变 ; 

@ 软件 支持 环境 的 改变 ,如 操作 系统 、 编 译 器 或 实用 程序 的 变化 等 。 

(3) 完善 性 更 动 。 为 扩充 功能 或 改善 性 能 而 进行 的 更 动 , 包 括 : 

.为 扩充 和 增强 功能 而 作 的 更 动 , 如 扩充 解 题 范 围 和 算法 优化 等 ; 

@ 为 改善 性 能 而 作 的 更 动 , 如 提高 运行 速度 、 节 省 存储 空间 等 ; 

@ 为 便于 维护 而 作 的 更 动 ,如 为 了 改进 易 读 性 而 增加 一 些 注释 等 。 

(4) 预防 性 更 动 。 在 问题 发 生 之 前 ,为 防止 问题 发 生 所 进行 的 更 动 。 这 类 更 动 的 特点 
是 没有 “实际 发 生 过 的 问题 "的 问题 报告 单 。 因 此 对 于 这 类 更 动 申请 时 可 不 需要 软件 问题 报 
告 单 ,但 在 软件 更 动 申请 及 其 附加 报告 中 要 更 加 详细 地 分 析 和 说 明 更 动 的 原因 及 预期 结果 。 
预防 性 更 动 主 要 包括 : 

@ 在 吸取 其 他 软件 的 经 验 教训 的 基础 上 或 对 其 他 发 生 过 的 问题 "举一反三 ”后 ,为 预防 
问题 的 发 生 对 软件 进行 更 动 , 如 增加 软件 防 跑 飞 ” 措 施 等 ; 

@ 为 改进 软件 的 可 维护 性 或 可 靠 性 ,或 者 为 了 给 未 来 的 改进 奠定 更 好 的 基础 而 更 动 软 
件 , 如 采用 逆向 工程 与 重 构 工 程 等 先进 技术 更 动 或 重 构 已 有 的 系统 ,产生 一 个 新 版 本 。 

软件 更 动 完毕 后 ,软件 更 动 方 应 提交 软件 更 动 说 明 对 更 动 项 进行 描述 。 其 中 虽然 会 给 
出 更 动 涉及 的 软件 需求 描述 ,但 一 般 都 比较 粗略 而且 依 据 该 信息 ,测试 人 员 很 难 准确 定位 
到 前 次 测试 中 的 具体 软件 需求 依据 ,也 必 将 影响 到 后 续 对 需求 依据 所 涉及 测试 用 例 的 拣 择 
范围 。 因 此 ,在 软件 更 动 说 明 所 描述 信息 的 基础 上 ,测试 人 员 应 进行 进一步 的 回归 测试 更 动 
影响 域 分 析 ,准确 获取 每 一 处 更 动 涉及 的 前 次 测试 的 软件 需求 项 。 

黑 盒 测试 的 软件 更 动 影响 域 分 析 可 采用 下 述 测试 信息 多 层次 结构 模型 及 针对 各 类 更 动 
的 影响 域 分 析 方 法 。 


1. 测试 信息 多 层次 结构 模型 

由 于 测试 信息 多 层次 结构 模型 依赖 于 项 目 初次 测试 的 信息 层次 ,因此 先 将 项 目 初次 测 
试 的 流程 以 及 信息 层次 做 一 介绍 。 

1) 初次 测试 流程 

项 目 进行 黑 盒 测 试 一 般 依 据 的 是 被 测 软件 的 需求 规格 说 明文 档 , 其 主要 流程 如 下 。 

首次 测试 中 测试 方 首先 根据 被 测 软件 需求 文档 中 针对 各 功能 、 性 能 、 接 口 及 其 他 方 
面 的 文本 描述 进行 项 目 首次 测试 的 需求 梳理 ,梳理 出 的 需求 项 将 作为 首次 测试 的 测试 依 
据 。 接 下 来 测试 人 员 依 据 被 测 软件 的 需求 ,确定 被 测 对象 及 其 测试 类 型 。 之 后 测试 人 员 
应 针对 每 个 测试 类 型 确定 其 包含 哪些 测试 点 (如 功能 测试 的 测试 点 就 是 该 功能 所 包含 的 
所 有 功能 细 项 ) 。 测 试 人 员 应 针对 每 个 测试 点 分 别 设计 一 个 测试 项 ,明确 每 个 测试 项 的 
测试 要 求 ,测试 策略 及 方法 。 此 外 .还 应 在 测试 项 与 软件 需求 项 之 间 建 立 双 向 追踪 关系 ， 
以 保证 全 面 的 测试 覆盖 及 避免 元 余 测 试 的 发 生 。 上 述 工作 完成 后 ,测试 人 员 将 为 每 个 测 
试 项 设计 测试 用 例 。 在 之 后 的 测试 用 例 执 行 过 程 中 .测试 人 员 记 录 测 试 结果 并 提交 测试 
过 程 中 所 发 现 的 问题 。 

当 首 次 测试 结束 后 ,被 测 方 将 针对 测试 中 发 现 的 问题 进行 分 析 , 查 找 其 原因 并 进行 程序 
的 更 动 。 更 动 后 被 测 方 应 提交 软件 更 动 说 明 , 说 明 所 做 更 动 的 原因 、 更 动 前 后 的 代码 对 比 、 
更 动 涉 及 的 软件 需求 。 基 于 软件 更 动 说 明 . 测 试 方 将 对 被 测 软 件 进行 相应 的 回归 测试 活动 。 
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(1) 测试 需求 。 测 试 需求 是 软件 测试 的 测试 依据 。 黑 盒 测试 的 测试 需求 一 般 为 被 测 软 
件 需求 规格 说 明文 档 中 所 明确 的 各 个 要 求 。 测 试 人 员 应 对 被 测 软件 的 需求 规格 说 明文 档 进 
行 梳理 ,梳理 出 各 个 需要 测试 的 要 求 , 并 分 别 以 软件 需求 项 的 形式 表示 。 

(2) 被 测 对 象 。 在 软件 测试 过 程 中 进行 独立 测试 并 进行 质量 评估 的 一 个 软件 实体 ,如 
软件 单元 .软件 部 件 、 软 件 配 管 项 等 都 是 软件 测试 的 被 测 对 象 。 一 个 测试 项 目 至 少 包含 一 个 
被 测 对 象 。 

(3) 测试 类 型 。 测 试 类 型 是 对 被 测 对 象 测试 内 容 的 逻辑 划分 或 组 合 ,如 将 测试 内 容 划 
分 为 功能 测试 ,性 能 测试 .接口 测试 .安全 性 测试 .可 靠 性 测试 等 ,软件 测试 实践 中 存在 着 多 
种 测试 类 型 的 划分 或 组 合 方法 。 一 般 情况 下 ,将 被 测 对 象 不 同性 质 的 一 个 或 一 组 物理 属性 
归属 到 某 个 测试 类 型 。 一 个 被 测 对 象 的 测试 内 容 至 少 被 划分 或 组 合 为 一 个 测试 类 型 。 

(4) 测试 项 (测试 条 目 )。 测 试 项 是 被 测 对 象 某 个 测试 类 型 所 包含 的 各 个 测试 点 的 描 
述 , 如 被 测 对 象 功能 测试 类 型 下 的 某 个 测试 项 就 是 针对 某 个 子 功能 的 测试 要 求 描述 。 测 试 
dei 一 个 被 测 对 象 的 某 个 测试 类 型 中 至 少 包 含 一 个 测试 项 (测试 条 

。 测 试 项 实际 上 是 针对 梳理 出 的 各 软件 需求 项 的 测试 实施 点 。 各 测试 项 应 建立 与 上 述 
en 每 个 测试 项 至 少 应 与 一 条 软件 需求 项 建立 
联系 。 

(5) 测试 用 例 。 测 试用 例 是 支持 测试 项 (测试 条 目 ) 的 具体 测试 方法 的 具体 描述 , 主 
要 包括 测试 用 例 名 称 、 标 识 、 测 试 初始 条 件 、 测 试 步骤 集 ( 每 一 步骤 的 测试 输入 、 期 望 结 
果 、 判 别 标准 ) ,测试 用例 通过 准则 等 要 素 。 一 个 测试 项 (测试 条 目 ) 下 至 少 应 有 一 个 软件 
测试 用 例 。 

(6) 软件 问题 。 软 件 问题 是 执行 测试 用 例 过 程 中 发 现 的 实测 结果 与 期 望 结 果 之 间 存 在 
不 一 致 情况 的 描述 。 一 个 测试 用 例 可 提交 一 个 或 多 个 软件 问题 。 

(7) 软件 更 动 。 此 处 的 软件 更 动 是 为 了 解决 前 次 测试 所 发 现 软件 问题 所 进行 的 更 动 ， 
每 个 软件 问题 可 能 发 生 一 个 或 多 个 软件 更 动 。 

被 测 对 象 .测试 类 型 .测试 项 测试 用 例 ,软件 问 题 软件 更 动 的 层次 关系 如 下 所 示 ,测试 
项 目的 初次 测试 可 按照 这 样 的 层次 结构 组 织 测试 信息 。 梳 理 出 的 软件 需求 项 因为 与 测试 类 
型 之 间 没 有 层次 关系 ,因此 未 列 在 下 述 层次 中 ,但 其 与 测试 项 之 间 却 存在 关联 关系 。 
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被 测 对 象 1 测试 型 测试 顶 4 测试 用 全 / 软件 问题 软件 更 动 ， 


被 测 对 象 " 测试 类 型 p 测试 项 < 测试 用 例 软件 问题 ， 软件 更 动 ， 
3) 信息 多 层次 结构 模型 
我 们 将 测试 信息 进行 分 类 ,利用 黑 盒 测试 首次 测试 中 的 软件 需求 项 ,测试 项 测试 用例 、 
软件 问题 .软件 更 动 之 间 的 关联 关系 ,建立 一 个 多 层次 结构 模型 对 上 述 测试 信息 进行 组 织 及 
管理 。 软 件 需求 项 位 于 该 层次 结构 模型 的 最 高 层 , 所 有 测试 信息 以 它 为 基础 呈 树 状 展开 ;所 
有 软件 更 动 位 于 该 层次 结构 模型 的 最 底层 ,是 进行 回归 测试 更 动 影响 域 分 析 的 源头 。 测 试 
信息 多 层次 结构 模型 如 图 8-1 所 示 。 
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图 8-1 测试 信息 多 层次 结构 模型 图 


基于 上 述 测 试 信息 的 多 层次 结构 模型 ,我 们 分 别 为 各 类 更 动 提出 了 相应 的 更 动 影响 域 
分 析 方 法 。 


2. 各 类 更 动 的 影响 域 分 析 方 法 

1) 纠 错 性 更 动 

此 类 更 动 是 为 了 解决 前 次 测试 发 现 问题 所 进行 的 更 动 。 针 对 此 类 更 动 ,可 利用 上 述 首 
次 测试 信息 多 层次 结构 模型 中 各 层次 数据 之 间 的 关联 关系 ,按照 由 底 向 上 、 逐 层 追 溯 的 原 
则 ,获取 每 个 软件 更 动 所 涉及 的 软件 需求 项 。 

按照 上 述 方法 ,首先 定位 处 于 测试 信息 多 层次 结构 最 底层 的 某 个 软件 更 动 , 然 后 由 底 向 
上 ,依次 追溯 到 该 更 动 所 针对 的 软件 问题 .提交 问题 的 测试 用 例 、 用 例 所 属 测试 项 ,与 测试 项 
所 关联 的 软件 需求 项 集合 ,该 集合 就 是 纠 错 性 更 动 所 涉及 的 更 动 影响 域 范围 。 

2) 适应 性 更 动 

此 类 更 动 是 根据 软件 运行 情况 的 变化 而 进行 的 更 动 ,因此 大 多 是 对 软件 需求 的 变更 或 
增 减 。 针 对 此 类 更 动 应 依据 软件 更 动 方 提交 的 更 动 说 明 ,进行 以 下 分 析 : 

(1) 对 其 变更 的 需求 进行 分 析 , 对 已 有 的 测试 需求 项 进行 修改 ; 

(2) 对 其 中 新 增 需求 进行 梳理 ,分 解 为 多 个 软件 需求 项 ; 

(3) 而 针对 软件 功能 删 减 的 情况 ,测试 人 员 应 在 前 次 测试 所 梳理 的 测试 需求 依据 中 将 
删 减 部 分 涉及 的 软件 需求 项 进行 相应 删除 。 

3) 完善 性 更 动 

此 类 更 动 是 由 于 软件 实现 被 优化 所 引起 的 ,与 软件 问题 没有 关联 。 其 更 动 涉及 的 软件 
需求 内 容 依 赖 于 提交 的 更 动 信息 。 因 此 .应 先 在 软件 更 动 说 明 中 找到 关于 此 类 更 动 所 涉及 
需求 内 容 的 相应 描述 ,确定 此 类 更 动 所 涉及 的 前 次 测试 的 软件 需求 项 集合 。 














4) 预防 性 更 动 

预防 性 更 动 一 般 是 在 原 有 软件 需求 的 基础 上 增加 新 的 需求 。 针 对 此 类 更 动 应 依据 提交 
的 更 动 说 明 ,对 其 中 新 增 需求 进行 梳理 ,分 解 为 多 个 软件 需求 项 。 

经 过 针对 上 述 4 种 更 动情 况 的 影响 域 分 析 ,在 黑 盒 测试 进行 回归 测试 时 ,其 更 动 所 涉及 
的 影响 域 范围 被 最 终 确定 下 来 。 


8.3.2 白 盒 测 试 更 动 影响 域 分 析 


白 盒 测试 认为 软件 更 动 实 际 上 是 修改 了 程序 的 定义 和 使 用 关系 ,因此 白 盒 测试 进行 回 
归 测 试 时 关注 的 是 更 动 后 被 测 软件 程序 中 各 定义 和 使 用 关系 的 正确 性 。 如 果 将 软件 更 动 前 
所 有 用 以 验证 各 定义 和 使 用 关系 的 测试 用 例 全 部 重新 执行 ,测试 预算 和 进度 的 成 本 必 将 大 
大 增加 ,显然 不 利于 白 盒 回归 测试 活动 的 高 效 开展 。 为 了 解决 上 述 问题 ,就 要 求 测试 人 员 必 
须 准确 获取 软件 更 动 影响 到 的 程序 中 的 定义 和 使 用 关系 ,并 针对 该 影响 域 范围 展开 相应 的 
回归 测试 活动 。 


1. 软件 更 动 类 型 及 影响 域 

受 更 动 影响 的 定义 和 使 用 关系 可 分 为 两 大 类 : 一 类 是 因为 定义 或 者 使 用 的 增 减 而 带 来 
的 直接 影响 , 即 产生 了 新 的 定义 和 使 用 关系 ; 另 一 类 是 因为 变量 值 的 改变 或 者 条 件 语句 中 谓 
语 的 改变 而 对 定义 和 使 用 关系 产生 的 间接 影响 。 因 此 , 白 盒 测试 中 软件 更 动 影 响 域 分 析 就 
是 要 分 析出 程序 更 动 后 受到 直接 或 间接 影响 的 定义 和 使 用 关系 。 

为 此 ,首先 将 回归 测试 可 能 出 现 的 软件 更 动 类 型 进行 归纳 ,并 针对 每 一 种 更 动 对 定义 和 
使 用 关系 的 影响 进行 分 析 。 

更 动 对 程序 所 带 来 的 影响 可 归纳 为 以 下 3 种 类 型 。 

(1) 产生 了 新 的 定义 和 使 用 关系 。 引 发 这 种 情况 一 般 是 由 于 定义 或 者 在 语句 中 增加 了 
对 别 的 变量 的 引用 。 如 下 面 的 代码 段 : 





如 果 上 述 代码 段 的 语句 4 被 "Y: 一 2 十 X" 人 代替, 就 引进 了 新 的 变量 X, 从 而 产生 了 新 的 定义 
和 使 用 关系 。 

(2) 因为 变量 值 的 改变 而 使 得 一 些 定义 和 使 用 关系 受到 间接 影响 。 这 种 情况 下 不 产生 
新 的 定义 和 使 用 关系 ,但 那些 依赖 于 更 动 变量 值 的 定义 和 使 用 关系 会 受到 间接 影响 。 如 下 
面 的 代码 段 : 





如 果 上 述 代码 段 的 语句 1 被 *X: 一 20" 人 代替: 虽然 没有 产生 新 的 定义 和 使 用 关系 ,但 由 于 变 
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量 X 的 值 发 生变 化 ,使 所 有 依赖 于 XX 的 值 的 定义 和 使 用 关系 也 发 生变 化 。 

(3) 因为 条 件 语 句 中 谓词 的 值 或 操作 符 的 改变 而 使 得 一 些 定义 和 使 用 关系 受到 间接 影 
响 。 这 种 情况 下 不 产生 新 的 定义 和 使 用 关系 ,但 是 所 有 控制 依赖 于 谓词 的 值 或 操作 符 发 生 
改变 语句 的 定义 和 使 用 关系 都 会 受到 影响 。 如 下 面 的 代码 段 : 


1X:=10 

2 if (A>1) then 
3 Y:=X+5 

4 End if 


如 果 上 述 代码 段 的 语句 2 被 "if(A 二 1)then" 代 替 , 尽 管 没有 产生 新 的 定义 和 使 用 关系 ,但 所 
有 控制 依赖 于 语句 2 的 定义 和 使 用 关系 都 受到 影响 。 


2. 更 动 影响 域 分 析 方 法 

程序 切片 技术 是 一 种 用 于 分 解 程序 的 分 析 技 术 , 其 目的 是 获取 影响 程序 某 关 注 变量 的 
所 有 语句 和 控制 谓词 组 成 的 集合 。 任 何 一 个 程序 可 以 和 一 组 程序 切片 的 并 集 等 价 , 测 试 一 
个 程序 就 可 以 转化 成 测试 该 程序 的 一 组 切片 及 其 补 集 ,从 而 保证 了 软件 测试 具有 充分 的 柳 
盖 。 由 于 回归 测试 中 获取 更 动 影 响 域 是 要 得 到 由 于 更 动产 生 的 所 有 受到 影响 的 定义 和 使 用 
关系 集合 ,与 程序 切片 技术 的 目的 一 致 ,因此 可 以 利用 程序 切片 的 思想 来 获取 软件 更 动 的 影 
响 域 。 

目前 可 通过 程序 切片 的 方法 获取 受 更 动 影响 的 定义 和 使 用 关系 。 该 方法 的 主体 思想 
是 : 首先 从 程序 更 动 处 开始 沿 着 后 向 进行 遍历 ,找到 与 被 更 动 的 语句 有 关 的 定义 点 ;再 从 程 
序 更 动 处 开始 沿 着 前 向 进行 遍历 ,寻找 定义 点 因为 程序 更 动 而 发 生变 化 后 所 影响 到 的 所 有 
使 用 点 及 其 定义 点 。 

该 方法 是 基于 控制 流 图 的 .应 先 画 出 软件 更 动 前 程序 的 控制 流 图 。 在 控制 流 图 中 每 个 
节点 代表 一 条 语句 , 边 代表 语句 之 间 的 控制 流 ,变量 的 定义 和 使 用 信息 附加 在 每 个 节点 劳 
边 。 分 析 完 成 后 得 到 的 结果 是 受 更 动 影响 的 所 有 定义 和 使 用 关系 的 集合 .其 中 每 个 定义 和 
使 用 关系 用 三 元 组 (s,u,v) 表 示 , 表 示 在 语句 :中 定义 的 变量 wv 在 语句 中 被 使 用 。 

上 述 方法 的 主体 思想 可 以 流程 图 的 形式 进行 展现 ,如 图 8-2 所 示 。 

该 方法 的 实施 步骤 如 下 : 在 被 测 程序 的 控制 流 图 中 , 某 个 更 动 节点 为 n; ,其 更 动 变量 为 
X。 首 先 沿 着 控制 流 图 的 逆向 进行 遍历 ,查看 遍历 经 过 的 节点 中 是 否 包含 更 动 变量 X 的 定 
义 节点 。 如 果 节点 n 包含 对 该 更 动 变量 义 的 定义 , 则 将 定义 节点 n; 到 更 动 节点 n; 的 定义 
和 使 用 关系 记录 下 来 , 记 为 (n,n;. 义 ) ;然后 将 节点 n; 及 该 语句 节点 中 由 于 变量 X 的 更 动 而 
受到 影响 的 变量 Y 放 入 一 个 列表 中 .然后 从 节点 ni 开始 沿 着 控制 流 图 的 正 向 进行 遍历 , 查 
看 控制 流 图 中 各 节点 旁边 的 引用 变量 是 否 包含 变量 了 ,如 果 节 点 nm 的 引用 变量 包含 该 变 
量 , 则 将 节点 mw 及 受 引 用 Y 而 影响 到 的 变量 Z 加 入 列表 ,并 将 受 影响 的 定义 和 使 用 关系 记 
录 下 来 , 记 为 (n;, m4.，Y)。 当 针对 节点 ni 中 变量 Y 引用 情况 的 遍历 结束 后 ,将 节点 n; 及 变 
量 Y 从 列表 中 去 除 .按照 列表 中 元 素 的 先后 顺序 ,依次 查找 各 引用 节点 中 相应 变量 的 节点 ， 
将 受 影响 节点 及 变量 依次 加 入 列表 .并 将 受 影响 的 定义 和 使 用 关系 记录 下 来 。 重 复 上 述 过 
程 , 直 至 列表 中 所 有 元 素 的 影响 范围 信息 均 遍 历 完 成 ,最 后 得 到 的 结果 为 一 个 受 更 动 影 响 的 
定义 和 使 用 关系 集合 。 
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确定 模块 中 更 动 节点 mm 及 
其 更 动 变 量 X 











+ 
从 更 动 节点 nn 开 始 ， 在 相应 
控制 流 图 中 进行 逆向 遍历 











遍历 经 过 的 节点 中 是 否 包 含 
更 动 变 量 X 的 定义 ? 


a 点 m 的 定义 和 使 用 关系 





元 组 形式 <mj. ni 和 > 记录 下 来 








将 更 动 节点 及 该 节点 语句 中 由 于 更 动 
变量 X 而 受到 影响 的 变量 7 放 入 一 个 列表 中 








按照 列表 中 元 素 的 先后 顺序 ， 取 出 列表 中 第 一 个 节 
点 及 其 变量 作为 当前 关注 对 象 













沿 着 控制 流 图 的 正 向 进行 遍历 ， 查 看 
hy ee le 








li 


该 变量 而 受 影 
响 的 变量 Z 加 入 列表 








将 受 影 响 的 定义 和 使 用 关系 
以 三 元 组 形式 <m; mY> 记 录 下 来 


















RU 
情况 否 结束 ? 











将 当前 关注 的 节点 及 变量 从 列表 中 移 除 





列表 中 所 有 元 素 的 影响 范围 
信息 是 否 均 遍历 完成 ? 











得 到 更 动 影响 的 定义 和 使 用 关系 集合 





图 8-2 更 动 影响 域 分 析 方 法 流程 图 
3. 实例 展示 


下 面 以 一 段 程序 代码 为 例 , 在 该 段 程序 代码 中 设 团 了 上 述 3 种 更 动 类 型 ,按照 上 述 切片 
方法 逐一 对 其 影响 域 的 获取 方法 进行 具体 说 明 。 图 8-3 是 一 段 程 序 源 代码 ,图 8-4 是 此 段 
代码 的 控制 流 图 。 每 个 


每 个 节点 代表 一 条 语句 .每 个 语句 中 用 到 的 变量 标注 在 节点 劳 边 。 
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X:=10 
试 A> Dthen 
Y=X+5 


2:=4*Y 


if(Z MOD 3) then 
W:=Z+5 























图 8-3 程序 源 代码 示例 图 8-4 程序 源 代码 示例 的 控制 流 


1) 产生 了 新 的 定义 和 使 用 关系 

上 述 程序 中 语句 6 被 “Z: 一 4x* (Y 十 X) ”代替 ,引进 了 新 的 变量 X。 

首先 , 沿 着 控制 流 图 中 控制 流 的 逆向 查找 X 的 定义 点 ,该 定义 点 在 语句 2 所 对 应 的 节 
点 处 被 找到 。 由 于 语句 6 中 引进 了 新 的 变量 X, 因 此 从 语句 2 到 语句 6 之 间 就 增加 了 新 的 
定义 和 使 用 关系 42,6,X); 然 后 从 语句 6 所 在 节点 开始 , 沿 着 控制 流 的 正 向 查找 此 更 动 对 后 
续 的 影响 。 由 于 语句 6 更 动 了 变量 Z 的 值 ,而 语句 8、10 用 到 变量 Z, 因 此 从 语句 6 到 语句 
8、10 的 关于 变量 Z 的 定义 和 使 用 关系 46,8,Z)、(6.10.2Z) 受 到 间接 影响 ,并 且 语 句 8.10 中 
的 变量 W 也 受到 影响 ,而 语句 12 用 到 了 变量 W。 因 此 从 语句 8、10 到 语句 12 的 关于 变量 
W 的 定义 和 使 用 关系 (8,12,W)、《10,12,W) 受 到 间接 影响 。 

基于 控制 流 图 .利用 切片 方法 分 析 得 到 语句 6 发生 上 述 更 动 后 ,影响 到 的 定义 和 使 用 关 
系 包括 i (2165) 5 (00892).(6510, 2 8512 ,WY C10 L123WY; 

2) 因为 变量 值 的 改变 而 使 得 一 些 定义 和 使 用 关系 受到 间接 影响 

上 述 程序 中 语句 2 被 *X: 二 20” 替 换 , 所 有 依赖 于 语句 2 中 X 值 的 定义 和 使 用 关系 都 受 
到 了 影响 ,但 没有 产生 新 的 定义 和 使 用 关系 。 在 控制 流 图 中 的 语句 2 对 应 节点 开始 , 沿 着 控 
制 流 图 的 正方 向 按照 切片 方法 进行 查找 ,最 终 获 取 到 受 影响 的 定义 和 使 用 关系 包括 : 〈2,4， 
X) (4,6,Y).(6,8,2).(6,10,2).(8,12,W)、(10,12,W)。 

3) 因为 条 件 语句 中 谓词 的 值 或 操作 符 的 改变 而 使 得 一 些 定义 和 使 用 关系 受到 间接 
影响 

上 述 程序 中 语句 3 被 “if (A 二 1)” 代 替 ., 所 有 依赖 于 语句 3 的 定义 和 使 用 关系 都 会 受 
到 影响 ,但 没有 产生 新 的 定义 和 使 用 关系 。 这 些 受 影响 的 定义 和 使 用 关系 有 (4,6,Y) (因为 
语句 4 控制 依赖 于 语句 3) ,还 有 后 续 受 影响 的 定义 和 使 用 关系 ,包括 : (6.8,2Z)、《6,10,2)、 
(8,12,W)、 (10.12.W)。 

上 述 3 种 情况 分 别 使 用 程序 切片 方法 获取 到 各 自 更 动 受 直接 影响 或 间接 影响 的 定义 和 
使 用 关系 , 即 获取 到 各 种 更 动 的 相应 影响 域 。 

通过 上 述 程序 切片 的 方法 获取 白 盒 回归 测试 中 软件 更 动 的 影响 域 ,缩小 了 白 盒 回归 测 
试 中 软件 测试 的 范围 ,显著 提高 了 回归 测试 的 效率 ;并且 由 于 通过 程序 切片 技术 获取 白 盒 更 
动 影 响 域 的 方法 考虑 到 程序 中 存在 的 各 种 依赖 关系 ,使 得 获取 的 更 动 影响 域 更 加 全 面 、 准 
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确 ,能 够 有 效 保证 被 测 软件 自 盒 回归 测试 的 充分 性 。 
8.4 回归 测试 用 例 设计 


8.4.1 回归 测试 用 例 设 计 原 则 


回归 测试 用 例 设计 包括 两 部 分 ,一 是 更 动 前 测试 所 包含 测试 用 例 的 选取 ,二 是 新 增 测试 
用 例 的 设计 。 新 增 测试 用 例 的 设计 与 其 他 测试 没有 太 大 区 别 , 但 如 何在 更 动 前 测试 所 包含 
测试 用 例 的 大 集合 中 ,合理 选取 涉及 软件 更 动 部 分 及 受 更 动 影响 部 分 的 测试 用 例 却 存在 一 
定 的 困难 。 

常用 的 测试 用 例 选取 策略 有 下 述 3 种 。 

(1) 选取 软件 更 动 范 围 内 的 测试 用 例 。 该 原则 是 依据 修改 的 内 容 来 选择 测试 用 例 , 这 
些 测试 用 例 仅 用 来 验证 所 修改 软件 部 分 的 实现 是 正确 的 。 这 种 方法 的 效率 最 高 ,然而 风险 
也 最 大 。 因 为 它 没有 考虑 某 一 个 修改 是 否 影 响 了 软件 的 其 他 部 分 。 这 种 方法 适合 用 于 测试 
时 间 短 ,软件 结构 耦合 性 很 小 的 情况 下 进行 回归 测试 时 用 例 的 选取 。 

(2) 选取 受 影响 功能 的 测试 用 例 。 该 原则 需要 根据 影响 域 分 析 的 结果 ,选取 所 有 受 影 
响 部 分 所 涉及 的 测试 用 例 。 对 于 不 同 级 别 的 测试 .选取 受 影响 功能 的 测试 用 例 方法 也 不 一 
样 ,多 数 时 候 还 需要 依靠 测试 人 员 的 经 验 。 例 如 .对 于 单元 测试 来 说 ,回归 测试 需要 考虑 到 
软件 的 更 动 可 能 对 公共 接口 的 影响 ,特别 是 全 局 变量 、 输 入 输出 接口 、 配 置 文件 等 。 对 于 配 
管 项 和 系统 测试 来 说 ,回归 测试 需要 考虑 到 修改 部 分 对 性 能 和 接口 的 影响 等 。 

(3) 规定 回归 测试 用 例 指标 。 该 原则 一 般 用 于 在 相关 受 影响 部 分 难以 界定 的 时 候 使 
用 。 一般 由 测试 人 员 与 开发 人 员 共 同 确定 测试 用 例 选 取 的 指标 。 例 如 : 规定 修改 范围 内 的 
测试 用 例 全 部 选取 .其 他 测试 用 例 选取 60%。 


8.4.2 已 有 测试 用 例 的 选取 


综合 上 述 原则 .可 以 制定 回归 测试 设计 时 对 已 有 测试 用 例 的 选取 策略 。 该 策略 是 基于 
测试 需求 的 追踪 关系 而 建立 的 。 软 件 测试 过 程 中 的 追踪 关系 可 表示 为 如 图 8-5 所 示 的 
形式 。 

1. 测试 需求 追踪 关系 定义 

测试 需求 的 追踪 关系 包括 下 列 一 组 追踪 关系 。 

1) 测试 需求 间 的 关系 

软件 测试 需求 集 定义 为 RR 三 {ri .ro .rs，… ,ri，…), 是 被 测 软件 系统 需要 覆盖 的 测试 需 
求 集合 。 测 试 需求 集 是 软件 的 组 成 模块 .如 从 结构 角度 一 个 测试 需求 可 以 是 一 条 语句 或 一 
个 函数 (过 程 或 方法 ) 。 从 功能 角度 一 个 测试 需求 可 以 是 一 个 功能 项 或 一 个 被 测 特征 。 

在 进行 测试 需求 分 析 时 ,依据 软件 需求 规格 说 明确 定 测试 需求 。 测 试 需求 包括 软件 的 
功能 性能、 接口 人 机 界面 ` 安 全 性 ` 可 靠 性 和 可 测试 性 要 求 等 。 

测试 需求 之 间 存 在 着 关联 关系 。 在 进行 测试 需求 分 析 时 ,可 以 根据 软件 需求 规格 说 明 
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图 8-5 软件 测试 中 的 追踪 关系 示意 图 


得 到 软件 需求 间 的 关联 关系 。 在 采用 结构 化 方法 描述 的 软件 需求 规格 说 明 中 ,可 根据 软件 
数据 流 图 和 控制 流 图 确定 软件 需求 之 间 的 关系 。 在 采用 面向 对 象 方法 描述 的 软件 需求 规格 
说 明 中 ,可 根据 用 例 图 确定 软件 需求 间 的 关联 关系 。 考 虑 实际 应 用 的 便捷 性 ,可 以 将 软件 测 
试 需求 之 间 的 关联 关系 表达 为 无 向 联通 图 。 

2) 测试 需求 与 测试 项 之 间 的 追踪 关系 

测试 项 的 集合 定义 为 IT 一 {item 'items ,items ,… ,itemj，…) ,是 对 被 测 软件 确定 的 测试 
项 。 测 试 项 是 为 了 有 效 实施 对 某 一 软件 需求 的 测试 而 设计 的 测试 要 求 。 测 试 项 的 描述 包括 
名 称 、 标 识 、 测 试 项 说 明 ,测试 方法 ,测试 充分 性 要 求 ,测试 项 终止 要 求 ,测试 项 优先 级 以 及 测 
试 项 对 测试 需求 的 追踪 关系 。 

分 析 测 试 需求 与 测试 项 的 关系 可 以 得 到 : 一 个 测试 需求 由 一 个 或 多 个 测试 项 覆盖 ,一 
个 测试 项 关联 一 个 或 多 个 测试 需求 。 
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3) 测试 项 与 测试 用 例 的 追踪 关系 

软件 测试 用 例 集 定 义 为 了 一 全 短小 是 针对 被 测 软件 设计 的 一 组 测试 用 例 
集合 。 分 析 测 试用 例 集 与 测试 项 集 之 间 的 关系 ,可 以 得 出 以 下 结论 : 一 个 测试 用 例 可 能 覆 
盖 一 个 或 多 个 测试 项 ,同时 一 个 测试 项 可 能 需要 一 个 或 多 个 测试 用 例 来 完成 测试 要 求 。 

4) 测试 用 例 与 软件 问题 的 追踪 关系 

软件 问题 集 定义 为 P 三 {pi1,ps，ps，…,p1，…) ,是 执行 软件 测试 用 例 后 标识 出 的 软件 失 
效 , 这 些 失效 是 软件 缺陷 的 外 在 体现 。 因 此 ,一 个 软件 问题 一 定 与 某 一 个 测试 用 例 相关 联 。 
也 就 是 说 ,测试 发 现 的 软件 问题 ,一 定 是 执行 某 个 用 例 而 产生 的 。 这 样 ,从 一 个 问题 一 定 能 
够 追踪 到 发 现 它 的 测试 用 例 。 

5) 软件 问题 与 软件 更 动 之 间 的 追踪 关系 

软件 更 动 集 定义 为 C 一 {clyc ,cs :cn 除了 是 针对 软件 问题 进行 的 修改 以 外 ,还 
包括 适应 性 ` 完 善 性 和 预防 性 更 动 。 对 于 软件 变更 不 仅 需 要 对 提交 问题 的 用 例 进 行 重 新 执 
行 , 还 需要 根据 影响 域 分 析 的 结果 选择 已 有 的 用 例 或 新 增 用 例 进行 测试 。 对 于 新 增 测试 需 
求 一 般 情况 下 需要 增加 新 的 用 例 进行 测试 。 

分 析 软 件 问题 与 软件 更 动 之 间 的 关系 ,可 以 得 到 以 下 结论 : 一 个 软件 问题 对 应 一 个 或 
多 个 软件 更 动 ,而 一 个 软件 更 动 也 可 以 对 应 一 个 或 多 个 软件 问题 。 而 考虑 新 增 的 软件 需求 
或 由 于 适应 性 修改 需求 引起 的 变更 ,同时 考虑 方法 实现 的 便捷 性 ,可 以 用 软件 更 动 对 应 零 个 
问题 来 进行 描述 。 

2. 选取 方法 相关 定义 

针对 上 述 追 踪 关 系 分 析 , 可 以 给 出 如 下 相关 定义 : 

定义 1 原 测试 版 本 的 测试 需求 集 为 尺 , 测 试 项 集 为 工 测 试用 例 集 为 工 。 回 归 测试 的 
测试 需求 集 为 R ,测试 项 集 为 三 ,测试 用 例 集 为 T' ,软件 问题 集 为 已 ,软件 更 动 集 为 C。 

定义 2 软件 测试 需求 r; 的 属性 为 名 称 、 标 识 ,说 明 。 

定义 3 软件 测试 项 i 的 属性 为 名 称 、 标 识 、 测 试 项 说 明 测试 方法 、 测 试 充 分 性 要 求 、 
测试 项 终止 要 求 .测试 项 优先 级 以 及 测试 项 对 测试 需求 的 追踪 关系 。 其 中 , 设 测试 项 的 优先 
级 为 : 高 .中 、 低 。 

定义 4 软件 测试 用 例 的 属性 为 : 测试 用 例 名 称 、 标 识 、 用 例 综述 、 对 测试 项 的 追踪 
关系 、 测 试用 例 优先 级 .初始 化 要 求 .前 提 和 约束 、 测 试 步骤 、 用 例 的 期 望 结果 ,测试 结果 评估 
准则 等 。 其 中 , 设 测试 用 例 的 优先 级 为 : 高 、 中 、 低 。 

定义 5 软件 问题 p, 的 属性 为 : 问题 标识 .问题 类 别 .问题 级 别 、. 关 联 的 测试 用 例 .问题 
描述 和 改进 意见 等 。 

定义 6 软件 更 动 cw 的 属性 为 : 更 动 标识 、 更 动 说 明 、 更 动 类 型 以 及 更 动 影 响 域 分 析 说 
明 。 其 中 ,更 动 类 型 为 "0? 时 ,该 软件 更 动 为 纠 错 性 更 动 ; 当 更 动 类 型 为 "1" 时 ,软件 更 动 为 完 
善 性 更 动 ; 当 更 动 类 型 为 *2" 时 .软件 更 动 为 适应 性 更 动 ; 当 更 动 类 型 为 *3” 时 ,软件 更 动 为 预 
防 性 更 动 。 

3. 已 有 测试 用 例 选取 算法 


根据 影响 域 分 析 结 果 进 行 的 软件 回归 测试 用 例 选取 算法 如 下 。 
(1) 当 软 件 更 动 的 更 动 类 型 为 "0" 时 ,应 执行 以 下 步骤 进行 回归 测试 用 例 的 选取 : 


软件 测试 实用 方法 与 技术 


@ 遍历 软件 更 动 集合 中 的 所 有 更 动 , 依 据 变更 对 问题 的 追踪 关系 ,获取 变更 所 对 应 的 
问题 ,并 以 此 为 线索 ,查找 问题 所 对 应 的 用 例 , 将 其 放 入 回归 测试 用 例 集 中 ; 

@ 遍历 测试 用 例 集 T 中 所 有 测试 用 例 . 依 据 用 例 对 测试 项 的 追踪 关系 ,获取 所 有 相关 
的 测试 项 , 放 入 了 中 ; 

@ 遍历 工 中 所 有 测试 项 ,依据 测试 项 对 测试 需求 的 追踪 关系 ,获取 所 有 相关 的 测试 需 
求 , 放 入 尽 中 ， 

图 先 将 尽 ' 中 所 有 测试 需求 放 和 人 尺 " 中 ,之 后 遍历 R 中 所 有 测试 需求 ,将 与 R" 中 每 个 测 
试 需求 相关 的 其 他 测试 需求 也 放 和 人 到 回归 测试 需求 集 尺 "中 ， 

@ 遍历 R' 中 所 有 测试 需求 ,将 与 R' 中 每 个 测试 需求 相关 的 高 优先 级 测试 项 , 且 在 了 中 
不 存在 的 测试 项 添加 入 了 中 ; 

@ 遍历 了 中 所 有 测试 项 ,将 与 了 中 每 个 测试 项 相关 的 高 优先 级 测试 用 例 , 且 在 并 中 不 
存在 的 测试 用 例 添加 入 工 ' 中 。 

上 述 测 试用 例 选 取 算法 可 表示 为 如 图 8-6 所 示 。 


、 
{8 
;4 


酒 蔓 
@ 
泗 蔓 
6) 
到 萱 
© 


瑟 资 
[3 





更 动 
图 8-6” 纠 错 性 更 动 的 回归 测试 用 例 选取 算法 示意 图 


(2) 当 软 件 更 动 的 更 动 类 型 不 为 “0” 时 ,将 软件 更 动 的 要 求 放 入 测试 需求 R' 中 。 

上 述 (1) 中 各 步 已 完成 了 回归 测试 中 对 已 有 测试 用 例 的 筛选 。 在 (2) 中 需要 软件 测试 人 
员 为 每 个 新 增 测试 需求 设计 新 的 测试 项 ,并 为 每 个 新 增 测试 项 设计 新 的 测试 用 例 。 这 些 测 
试用 例 应 覆盖 新 增 需求 对 软件 各 特性 的 要 求 , 以 保证 新 增 测试 设计 的 充分 性 。 


8.5 回归 测试 过 程 


软件 回归 测试 过 程 往往 与 某 一 级 别 的 测试 执行 阶段 相互 融合 。 例 如 在 进行 配置 项 测试 
首 轮 测 试 后 ,发生 软件 更 动 后 即 可 进行 回归 测试 。 因 此 ,回归 测试 过 程 较为 简捷 ,但 对 测试 
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过 程 的 主要 要 求 是 一 致 的 。 软 件 回归 测试 的 过 程 如 图 8-7 所 示 。 


软件 问题 软件 更 动 说 明 


更 动 影 响 域 分 析 


Se 


制定 回归 测试 方案 


Sl 


执行 回归 测试 


-一 


测试 总 结 











图 8-7 软件 回归 测试 过 程 


1. 更 动 影响 域 分 析 

该 阶段 依据 软件 的 问题 报告 和 软件 更 动 说 明 ,分 析 每 项 更 动 的 影响 域 。 在 黑 盒 测试 中 
获取 更 动 影 响 域 就 是 确定 更 动 涉及 的 前 次 测试 所 依据 的 软件 需求 ,在 白 盒 测试 中 获取 更 动 
影响 域 就 是 确定 被 测 软件 更 动 后 受到 直接 或 间接 影响 的 定义 和 使 用 关系 ,所 获取 的 更 动 影 
响 域 将 作为 软件 回归 测试 的 测试 需求 依据 。 


2. 制定 回归 测试 方案 

制定 回归 测试 方案 是 根据 更 动 影响 域 分 析 的 结果 确定 回归 测试 需求 ,制定 回归 测试 计 
划 、 设 计 回归 测 试用 例 的 过 程 。 其 中 测试 计划 测试 用 例 的 内 容 要 求 与 相应 级 别 的 要 求 一 
致 。 一 般 情况 下 ,回归 测试 方案 应 进行 评审 ,以 保证 回归 测试 方案 的 充分 性 。 


3. 执行 回归 测试 

该 阶段 执行 回归 测试 用 例 集 合 。 测 试 过 程 中 测试 人 员 应 客观 记录 每 个 回归 用 例 的 测试 
结果 ,提交 回归 测试 过 程 中 所 发 现 的 问题 。 

如 果 回 归 测 试 中 仍然 发 现 问题 ,并且 被 测 方针 对 问题 又 进行 了 程序 更 动 .那么 更 动 后 的 
软件 应 进行 下 一 轮 的 回归 测试 。 因 此 ,回归 测试 有 可 能 存在 多 轮 次 的 情况 ,直至 测试 中 已 发 
现 问题 所 引起 的 软件 更 动 都 通过 测试 ,上 且 不 再 发 现 新 的 问题 。 


4. 测试 总 结 

完成 回归 测试 后 ,需要 对 被 测 软 件 经 历 测 试 的 情况 进行 全 面 总 结 。 当 测试 与 回归 测试 
的 进度 安排 较为 紧凑 时 .可 将 测试 与 回归 测试 的 总 结 一 并 进行 ;而 当 回 归 测 试 与 之 前 测试 的 
时 间 间 隔 较 长 .需要 出 具 相 应 的 测试 结论 时 .可 以 单独 针对 回归 测试 的 情况 进行 总 结 。 回 归 
测试 总 结 的 内 容 要 求 与 一 般 的 软件 测试 报告 一 致 
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面向 对 象 软件 测试 


当前 ,面向 对 象 的 软件 开发 方法 已 被 广泛 应 用 ,人 们 对 软件 质量 也 提出 了 更 高 要 求 。 面 
向 对 象 软件 的 测试 方法 作为 验证 面向 对 象 软件 质量 的 主要 手段 ,也 相应 得 到 了 人 们 的 广泛 
重视 。 面 向 对 象 的 封装 性 \ 继 承 性 、 多 态 性 等 特性 ,提高 了 软件 的 可 重用 性 ,便于 软件 团队 协 
作 设 计 开 发 ,而 且 易 于 维护 和 修改 。 但 同时 这 些 新 特点 也 带 来 了 新 的 风险 ,并 给 软件 测试 提 
出 了 新 的 挑战 ,使 得 传统 的 测试 方法 和 技术 已 不 能 完全 胜任 面向 对 象 的 软件 测试 。 


9.1 面向 对 象 软件 简介 


面向 对 象 软件 开发 是 目前 主流 的 软件 开发 技术 , 正 代 替 传 统 的 面向 过 程 开发 方法 ,逐渐 
成 为 主流 的 软件 开发 方法 。 面 向 对 象 技术 产生 更 好 的 系统 结构 ,更 规范 的 编程 风格 , 极 大 优 
化 了 数据 使 用 的 安全 性 ,提高 了 程序 代码 的 可 重用 性 。 

面向 对 象 的 程序 设计 是 以 下 面 的 7 个 基本 概念 为 核心 的 : 对 象 消息、 接口 .类 、 继 承 、 
封装 和 多 态 。 


1. 对 象 

对 象 是 一 个 可 操作 的 实体 , 既 包 含 了 特定 的 数据 ,也 包含 了 操作 这 些 数据 的 代码 。 在 面 
向 对 象 的 程序 设计 中 ,对 象 是 一 个 基本 的 可 计算 实体 ,对 象 被 创建 .修改 .访问 或 由 于 协作 的 
结果 而 被 删除 。 在 一 个 良好 的 面向 对 象 的 设计 理念 中 ,程序 中 的 对 象 是 一 些 问 题 及 其 解决 
方法 的 特定 实体 的 描述 。 在 程序 中 .对象 之 间 存 在 着 一 定 的 联系 ,这 种 联系 反映 了 问题 域 中 
实体 的 相对 关系 。 

对 象 是 软件 开发 期 间 测试 的 直接 目标 。 在 程序 运行 时 ,对 象 的 行为 是 否 符合 它 的 需求 
规格 说 明 ,该 对 象 与 相关 的 对 象 是 否 协同 工作 ,这 两 方面 是 面向 对 象 软件 测试 所 关注 的 
焦点 。 

对 象 可 以 用 它 的 生命 周期 来 描述 。 当 一 个 对 象 被 创建 时 它 的 生命 周期 就 开始 了 ,这 个 
过 程 贯 穿 于 对 象 的 一 系列 状态 , 当 一 个 对 象 被 删除 时 它 的 生命 周期 也 就 结束 了 。 

从 测试 视角 的 角度 ,关于 对 象 可 以 得 出 如 下 观点 。 

(1) 对 象 的 封装 。 这 使 得 已 定义 的 对 象 容易 识别 ,在 系统 中 容易 传递 ,也 容易 操纵 。 

(2) 对 象 隐藏 了 信息 。 这 一 点 使 得 对 象 信息 的 改变 有 时 很 难 观 察 到 ,因此 也 使 得 测试 
结果 分 析 的 难度 加 大 。 

(3) 对 象 的 状态 。 在 对 象 的 生命 周期 中 ,对象 都 有 一 个 状态 。 对 象 的 状态 是 多 变 的 , 因 
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We 


此 也 可 能 是 不 正常 行为 的 根源 。 | 

(4) 对 象 的 生命 周期 。 对 象 都 具有 生命 周期 。 在 对 象 生命 周期 的 不 同 阶段 ,为 了 确定 
对 象 的 状态 是 否 符合 它 的 生命 周期 ,对象 可 能 会 被 从 各 个 方面 进行 检测 。 过 早 地 创建 一 个 
对 象 或 删除 一 个 对 象 ,都 是 造成 错误 的 常见 原因 。 


2. 消息 

消息 是 对 象 的 操作 将 要 执行 的 一 种 请 求 。 除 了 需要 一 个 操作 的 名 字 , 消息 还 可 包含 一 
些 值 ( 实 参 ) ,它们 常常 在 操作 被 执行 时 使 用 。 消 息 的 接收 者 也 可 以 将 某 个 值 返回 给 消息 的 
发 送 者 。 

面向 对 象 的 程序 是 通过 一 系列 对 象 协作 工作 来 解决 问题 的 ,这 一 协作 是 通过 对 象 之 间 
互相 传送 消息 来 完成 的 。 一 般 地 ,把 发 送 消息 的 对 象 称 为 发 送 者 ,把 接收 消息 的 对 象 称 为 接 
收 者 。 有 一 些 消息 会 以 不 同 的 形式 返回 结果 ,例如 接收 者 以 返回 值 或 者 异常 的 形式 把 结果 
传送 给 发 送 者 。 

面向 对 象 程序 执行 的 典型 过 程 , 首 先是 实例 化 对 象 , 然 后 将 一 条 消息 传送 给 其 中 的 某 个 
对 象 ,消息 的 接收 者 把 它 自己 产生 的 消息 发 送 给 其 他 对 象 ( 也 可 以 发 送 给 自己 ) 来 执行 计算 。 
比如 ,在 一 些 由 事件 驱动 的 环境 下 ,环境 会 不 断 地 发 送 消息 并 且 等 待 诸如 鼠标 点 击 和 按键 等 
外 部 事件 的 响应 。 

从 测试 视角 的 角度 ,关于 消息 可 以 得 出 如 下 结论 。 

(1) 消息 有 其 发 送 者 。 发 送 者 可 以 决定 何 时 发 送 消息 ,并 且 可 能 会 做 出 错误 的 决定 。 

(2) 消息 有 其 接收 者 。 接 收 者 可 能 接收 到 非 预 期 的 特定 消息 。 当 它 接收 到 一 条 非 预期 
的 消息 时 ,接收 者 可 能 会 对 此 做 出 不 正确 的 反应 。 

(3) 消息 可 以 包含 有 实际 参数 。 在 处 理 一 条 消息 时 ,参数 能 被 接收 者 使 用 和 更 改 。 如 
果 传 递 的 参数 是 对 象 ,那么 在 消息 被 处 理 前 和 处 理 后 ,对 象 必须 处 于 正确 的 状态 ,而 且 它 们 
必须 实现 接收 者 所 期 望 的 接口 。 


3. 接口 

接口 是 行为 声明 的 集合 。 行 为 被 集中 在 一 起 ,并 通过 单个 的 概念 定义 一 些 相 关 的 动作 。 

接口 是 由 一 些 规范 构成 的 ,这 一 规范 定义 了 类 的 一 套 完整 的 公共 行为 。 例 如 ,在 C++ 
中 ,通过 定义 一 个 抽象 的 基 类 ,其 内 部 仅 包含 公有 的 虚拟 方法 ,可 以 达到 定义 接口 的 目的 。 

从 测试 视角 的 角度 ,关于 接口 可 以 得 出 如 下 结论 。 

(1) 接口 封装 了 操作 的 说 明 。 这 些 说 明 逐 步 形 成 了 诸如 类 这 种 形式 的 更 大 分 组 的 规 
范 。 如 果 这 一 接口 包含 的 行为 和 类 的 行为 不 相符 ,那么 对 这 一 接口 的 说 明 就 不 是 令 人 满 
意 的 。 

(2) 接口 不 是 孤立 的 。 它 与 其 他 的 接口 和 类 有 一 定 的 关系 。 一 个 接口 可 以 指定 一 个 行 
为 的 参数 类 型 ,使 得 实现 该 接口 的 类 可 被 当 作 一 个 参数 进行 传递 。 


4. 类 

类 是 一 组 具有 相同 数据 结构 和 相同 操作 的 对 象 集合 。 类 的 定义 包括 一 组 数据 属性 和 在 
数据 上 的 一 组 合法 操作 。 在 面向 对 象 的 程序 中 .任何 被 描述 的 概念 最 初 都 必须 被 声明 为 类 ， 
然后 创建 由 该 类 定义 的 对 象 。 创 建 对 象 的 过 程 被 称 作 实例 化 ,而 创建 的 结果 被 称 为 实例 。 
在 一 个 类 中 .每 个 对 象 都 是 类 的 实例 ,它们 都 可 使 用 类 中 提供 的 函数 。 一 个 对 象 的 状态 则 包 
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含 在 它 的 实例 变量 中 。 


5. 继承 

继承 是 类 之 间 的 一 种 联系 , 它 允 许 新 类 可 以 在 一 个 已 有 类 的 基础 上 进行 定义 。 一 个 类 
对 另 一 个 类 的 依赖 ,使 得 已 有 类 的 说 明和 实现 可 以 被 复 用 。 这 种 方法 有 一 个 重要 的 优势 , 那 
就 是 已 有 类 不 会 被 改变 ,并 且 对 其 他 任何 继承 它 的 新 类 来 说 都 是 一 样 的 。 这 里 所 说 的 新 类 
主要 是 指 子 类 或 派生 类 ,被 新 类 继承 的 已 有 类 就 叫 基 类 。 一 个 基 类 ,以 及 从 这 个 基 类 直接 或 
间接 继承 而 得 到 的 派生 类 ,它们 共同 构成 继承 层次 关系 。 在 继承 层次 关系 中 ,我 们 把 这 个 基 
类 叫做 “ 根 ”。 派 生 类 则 是 从 根 直接 或 间接 继承 过 来 的 。 除 了 根 。 每 个 类 都 有 一 到 多 个 直接 
或 间接 继承 的 类 ,每 个 类 也 都 有 若干 从 它 继 承 过 去 的 派生 类 。 

良好 的 面向 对 象 软件 设计 要 求 , 只 有 在 实现 一 种 或 一 类 关系 的 时 候 才 使 用 继承 ,一 般 是 
按照 类 的 定义 而 不 是 实现 来 使 用 它 。 

从 测试 视角 的 角度 来 看 ,继承 包含 以 下 内 容 。 

(1) 继承 提供 了 一 种 机 制 , 通 过 这 种 机 制 ,潜在 的 错误 能 够 从 一 个 类 传递 到 它 的 派生 类 
中 。 测 试 类 的 时 候 要 尽早 消除 这 种 错误 ,以 免 这 些 错误 一 并 传递 到 其 他 类 中 ,产生 延迟 放大 
效应 。 

(2) 继承 还 提供 了 另 一 种 机 制 ,这 种 机 制 能 使 我 们 重复 使 用 相同 的 测试 方法 。 因 为 子 
类 是 从 它 的 父 类 继承 过 来 的 ,所 以 子 类 也 就 继承 了 父 类 的 说 明和 实现 。 因 此 我 们 也 就 可 以 
用 测试 父 类 的 方法 对 子 类 进行 测试 。 


6. 封装 

封装 就 是 把 对 象 的 属性 和 方法 结合 成 一 个 整体 , 尽 可 能 掩盖 其 内 部 的 细节 。 封 装 后 的 
对 象 ,只 能 知道 输入 和 输出 ,无 法 了 解 内 部 的 操作 过 程 ,也 无 法 真正 了 解 内 部 数据 的 真实 状 
态 。 这 一 特征 简化 了 对 对 象 的 使 用 .同时 也 给 测试 带 来 了 难度 。 


7. 多 态 

多 态 提供 了 将 对 象 看 作 是 一 种 或 多 种 类 型 的 能 力 。 编 程 语言 的 类 型 机 制 可 定义 用 来 支 
持 许 多 不 同 的 类 型 适应 策略 。 此 外 .类 型 的 完全 匹配 可 能 是 最 安全 的 ,但 多 态 却 支持 灵活 的 
设计 ,同时 又 易于 维护 。 

多 态 有 几 种 不 同 的 形式 ,如 参数 多 态 ,包含 多 态 .过 载 多 态 。 参 数 多 态 是 能 够 根据 一 个 
或 多 个 参数 来 定义 一 种 类 型 的 能 力 。 包 含 多 态 和 过 载 多 态 在 面向 对 象 语言 中 通常 体现 在 子 
类 与 父 类 的 继承 关系 上 。 

包含 多 态 是 同一 个 类 具有 不 同 表现 形式 的 一 种 现象 。 面 向 对 象 的 编程 语言 对 包含 多 态 
的 支持 (也 称 为 动态 绑 定 ) ,使 得 参数 具有 对 象 替换 的 能 力 。 为 了 响应 操作 请 求 . 当 对 象 的 定 
义 与 后 续 对 象 的 定义 相符 时 .对象 就 可 以 被 相互 替换 。 换 句 话说 ,面向 对 象 程序 中 的 发 送 者 
能 够 在 用 对 象 作为 参数 时 根据 接口 进行 实现 ,而 不 是 实现 一 个 完整 的 类 。 

包含 多 态 提 供 了 一 种 强 有 力 的 能 力 . 可 以 任意 设计 接口 并 编写 代码 ,而 不 用 考虑 其 他 类 
的 对 象 是 否 发 送 了 消息 来 请 求 操作 。 包 含 多 态 使 得 设计 和 编码 比 以 前 更 加 抽象 。 实 际 上 ， 
定义 一 个 没有 实例 的 抽象 类 是 非常 有 用 的 :而 它 的 子 类 则 有 实例 存在 。 抽 象 类 主要 是 为 了 
定义 一 个 由 所 有 它 的 派生 类 支持 的 接口 。 

测试 视角 的 角度 来 看 .包含 多 态 具 有 以 下 功能 。 
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(1) 包含 多 态 允 许 系 统 通过 增加 类 来 进行 扩展 .而 不 是 修改 已 经 存在 的 类 。 当 然 在 扩 
展 中 也 会 出 现 出 乎 预料 的 交互 关系 。 

(2) 包含 多 态 允 许 任何 操作 都 可 以 包括 一 个 或 多 个 类 型 不 确定 的 参数 ,这 样 就 增加 了 
应 该 测试 的 实际 参数 的 种 类 。 

(3) 包含 多 态 允 许 操作 指定 动态 引用 返回 的 响应 ,因为 实际 引用 的 类 可 能 是 不 正确 的 ， 
或 者 不 是 发 送 者 所 期 望 的 。 


9.2 面向 对 象 软件 测试 概述 


不 同 于 传统 的 功能 模块 结构 ,面向 对 象 软件 的 结构 抛弃 了 传统 的 开发 模式 ,其 相应 的 开 
发 设计 阶段 的 需求 与 验证 机 制 也 与 以 往 不 一 致 ,因此 传统 的 经 典 测试 方法 已 经 不 能 满足 面 
向 对 象 软件 测试 的 需要 。 


9.2.1 面向 对 象 软件 的 特点 对 测试 的 影响 


相对 于 传统 的 软件 开发 方法 ,面向 对 象 软件 设计 是 一 种 全 新 的 开发 技术 ,面向 对 象 程序 
的 封装 性 、 继 承 性 、 多 态 等 特性 使 程序 具有 较 大 的 灵活 性 ,这 给 软件 测试 提出 了 新 的 要 求 , 使 
得 面向 对 象 软件 的 测试 更 加 复杂 。 面 向 对 象 软件 开发 设计 的 特征 对 软件 测试 的 影响 可 以 分 
为 以 下 3 个 方面 。 


1. 信息 隐蔽 对 测试 的 影响 

类 的 重要 作用 之 一 是 信息 隐蔽 。 信 息 隐蔽 是 指 只 让 用 户 知 道 那 些 确保 用 户 正确 使 用 一 
个 对 象 所 必需 的 信息 ,其 他 信息 对 用 户 来 说 是 隐 项 起 来 的 。 封 装 性 是 把 一 个 对 象 的 数据 和 
操作 数据 的 方法 聚集 在 一 个 多 辑 单元 内 ,对 对 象 的 访问 被 限制 在 一 个 严格 定义 的 界面 上 。 
信息 隐蔽 和 封装 性 把 类 的 有 具体 实现 与 它 的 接口 相 分 离 , 降 低 了 一 个 类 和 程序 其 他 各 部 分 之 
间 的 依赖 ,促进 了 程序 的 模块 化 ,并 在 一 定 程 度 上 简化 了 类 的 使 用 ,避免 了 不 合理 的 操作 并 
能 有 效 地 阻止 错误 的 扩散 ,减轻 了 维护 的 工作 量 。 但 同时 ,它们 也 给 程序 的 测试 带 来 了 一 定 
的 问题 。 

信息 隐蔽 与 封装 性 对 面向 对 象 测试 带 来 的 主要 问题 是 对 象 状 态 难以 观察 。 对 象 具 有 一 
定 的 状态 ,所 以 对 于 面向 对 象 的 软件 测试 来 说 ,对 象 的 状态 是 必须 考虑 的 因素 。 由 于 信息 隐 
项 机 制 的 存在 ,类 的 内 部 对 外 部 来 说 是 “不 可 见 的 ”. 它 的 属性 和 状态 只 能 通过 类 自身 的 方法 
或 函数 来 获得 。 这 给 测试 用 例 的 生成 带 来 了 一 定 的 困难 。 为 了 能 够 观察 到 这 些 属性 和 状 
态 , 以 确定 软件 执行 的 结果 是 否 正确 ,测试 时 往往 要 在 类 的 定义 中 增添 一 些 专门 的 函数 ,这 
些 函数 用 于 读 取 对 象 的 状态 ,以 便 测试 时 能 考察 对 象 的 状态 变化 。 


2. 继承 对 测试 的 影响 

继承 性 是 一 种 概括 对 象 共 性 和 组 织 结构 的 机 制 ,使 得 面向 对 象 设 计 更 具 自 然 性 和 直观 
性 ,是 一 种 有 效 的 重要 手段 。 子 类 不 但 继承 了 父 类 中 的 特征 (数据 和 方法 ) ,还 可 以 对 继承 的 
特征 进行 重 定 义 。 然 而 .继承 同时 也 向 测试 用 例 设计 者 提出 了 新 的 挑战 。 即 使 是 彻底 复 用 


二 
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的 ,对 每 一 个 新 的 使 用 语 境 也 需要 重新 测试 。 此 外 .多 重 继 承 增加 了 需要 测试 的 语 境 数量 ， 
从 而 使 测试 进一步 复杂 化 。 表 现 为 : 

(1) 若 在 子 类 中 重 定义 了 某 一 继承 的 方法 ,即使 两 个 函数 完成 相同 的 功能 ,对 重 定义 的 
方法 也 需要 重新 测试 ; 

(2) 若 一 个 类 得 到 了 充分 的 测试 , 当 其 被 子 类 继承 后 ,继承 的 方法 在 子 类 的 环境 中 的 行 
为 特征 需要 重新 测试 ; 

(3) 在 多 重 继承 的 情况 下 ,从 两 个 不 同 的 父 类 中 所 定义 的 同名 (或 同 构 型 ) 的 特征 中 按 
不 同 的 优先 级 (或 选择 方式 ) 在 子 类 中 仅 选择 保留 一 个 版 本 时 ,即使 所 得 到 的 子 类 的 结构 与 
父 类 相同 ,但 仍然 可 能 需要 不 同 的 测试 数据 集 ; 

(4) 车 我 们 对 父 类 中 某 一 方法 进行 了 重 定义 , 仅 对 该 方法 自身 或 其 所 在 的 类 进行 重新 
测试 是 不 够 的 ,还 必须 重新 测试 其 他 有 关 的 类 ,如 子 类 和 引用 类 。 

总 之 ,继承 并 未 简化 测试 问题 ,反而 使 源 代码 变 得 难以 理解 ,一 个 深层 次 的 底层 子 类 可 
能 只 有 一 两 行 代码 ,但 却 继承 了 上 百 种 特征 。 多 重 继承 会 显著 地 增加 派生 类 的 复杂 程度 , 导 
致 一 些 难以 发 现 的 隐 含 错误 。 这 些 都 在 一 定 程度 上 增加 了 测试 的 难度 。 


3. 多 态 性 与 动态 绑 定 对 测试 的 影响 

多 态 性 和 动态 绑 定 是 面向 对 象 方法 的 关键 特性 之 一 。 多 态 的 概念 是 指 同一 消息 可 以 根 
据 发 送 消息 对 象 的 不 同 采用 多 种 不 同 的 行为 方式 。 而 多 态 行为 操作 是 根据 当前 指针 引用 的 
对 象 类 型 来 决定 使 用 正确 的 方法 。 动 态 绑 定 则 决定 了 一 个 消息 只 能 在 编译 或 运行 时 才能 够 
确定 它 的 具体 行为 。 这 样 , 多 态 性 和 动态 绑 定 所 带 来 的 不 确定 性 ,使 得 传统 测试 实践 中 的 静 
态 分 析 方 法 过 到 了 不 可 逾越 的 障碍 。 而 且 它 们 也 增加 了 系统 运行 中 可 能 的 执行 路 径 , 加 大 
了 测试 用 例 的 数量 和 选取 难度 。 


9.2.2 面向 对 象 软件 测试 和 传统 测试 的 不 同 


面向 对 象 的 测试 在 许多 方面 要 借鉴 传统 软件 测试 方法 中 可 适用 的 部 分 ,并 且 在 软件 开 
发 的 具体 实践 中 ,也 经 常 混合 使 用 面向 对 象 的 开发 方法 和 结构 化 的 开发 方法 ,因此 二 者 存在 
一 定 的 相通 之 处 。 但 是 ,与 传统 方法 相 比 ,面向 对 象 的 开发 方法 又 有 新 的 内 容 和 特点 ,从 而 
导致 二 者 的 差异 。 


1. 测试 的 单元 不 同 

传统 软件 的 基本 构成 单元 为 功能 模块 .每 个 功能 模块 一 般 能 独立 地 完成 一 个 特定 的 功 
能 。 而 在 面向 对 象 的 软件 中 ,基本 单元 是 封装 了 数据 和 方法 的 类 和 对 象 。 对 象 是 类 的 实例 ， 
有 自己 的 角色 ,并 在 系统 中 承担 特定 的 责任 。 对象 有 自己 的 生存 周期 和 状态 ,状态 可 以 演 
变 。 对 象 的 功能 是 在 信息 的 触发 下 .实现 对 象 中 若干 方法 的 合成 以 及 与 其 他 对 象 的 合作 。 
对 象 中 的 数据 和 方法 是 一 个 有 机 整体 ,功能 测试 的 概念 不 适用 于 对 象 的 测试 。 


2. 系统 构成 不 同 

传统 的 软件 系统 是 由 一 个 个 功能 模块 通过 过 程 调用 关系 组 合 而 成 的 。 而 在 面向 对 象 的 
系统 中 ,系统 的 功能 体现 在 对 象 间 的 协作 上 。 

相 邻 的 功能 可 能 驻 留 在 不 同 的 对 象 中 ,操作 序列 是 由 对 象 间 的 消息 传递 决定 的 。 传 统 
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意义 上 的 功能 实现 不 再 是 靠 子 功能 的 调用 序列 完成 的 ,而 是 在 对 象 之 间 合 作 的 基础 上 完成 
的 。 不 同 对 象 有 自己 的 不 同 状态 而且, 同一 对 象 在 不 同 的 状态 下 对 消息 的 响应 可 能 完全 不 
同 。 因 此 ,面向 对 象 的 集成 测试 已 不 属于 功能 集成 测试 。 


9.2.3 面向 对 象 软件 测试 分 类 


由 于 面向 对 象 的 软件 开发 具有 类 继承 、 封 装 、 多 态 等 新 特性 ,其 对 相应 的 软件 测试 提 
出 了 新 要 求 ,但 是 面向 对 象 的 软件 测试 与 传统 面向 过 程 的 软件 测试 仍然 具有 一 定 的 相似 
过 处 。 

面向 对 象 的 开发 模型 突破 了 传统 的 瀑布 模型 ,将 开发 分 为 面向 对 象 分 析 (OOA) \ 面 向 
对 象 设计 (OOD) 和 面向 对 象 编程 (OOP)3 个 阶段 。 分 析 阶 段 产 生 整 个 问题 空间 的 抽象 描 
述 ,在 此 基础 上 ,进一步 归纳 出 适用 于 面向 对 象 编程 语言 的 类 和 类 结构 ,最 后 形成 代码 。 由 
于 面向 对 象 的 特点 ,采用 这 种 开发 模型 能 有 效 地 将 分 析 设 计 的 文本 或 图 表 代 码 化 ,不 断 适 应 
用 户 需 求 的 变动 。 针 对 这 种 开发 模型 ,结合 传统 的 测试 步骤 的 划分 ,可 以 将 面向 对 象 的 测试 
模型 划分 为 : 面向 对 象 分 析 的 测试 (OOA Test) ,面向 对 象 设计 的 测试 (OOD Test) ` 面 向 对 
象 编程 的 测试 (OOP Test) ,面向 对 象 单元 测试 (OO Unit Test) ,面向 对 象 集成 测试 (OO 
Integrate Test) ,面向 对 象 系统 测试 (OO System Test) 。 

这 种 划分 与 面向 对 象 开发 的 3 个 阶段 的 对 应 关系 如 表 9-1 所 示 。 


表 9-1 面向 对 象 的 软件 测试 模型 划分 


开发 阶段 对 应 测试 活动 
面向 对 象 分 析 面向 对 象 分 析 测 试 


面向 对 象 设计 面向 对 象 设计 测试 
面向 对 象 单 元 测试 面向 对 象 集成 测试 


面向 对 象 编程 
面向 对 象 编 程 测试 


与 传统 的 测试 模型 相 比 ,面向 对 象 的 测试 更 关注 于 对 象 而 不 仅仅 是 完成 输入 输出 的 单 
一 功能 。 因 此 ,针对 面向 对 象 软件 开发 :测试 活动 可 以 更 早 地 介入 分 析 和 设计 阶段 ,从 而 更 
好 地 配合 软件 开发 过 程 ,减少 软件 设计 缺陷 ,提高 软件 质量 。 





面向 对 象 系统 测试 





9.3 面向 对 象 软件 测试 模型 


如 前 节 所 述 ,面向 对 象 软件 的 测试 可 划分 为 6 个 测试 模型 。 其 中 .OOA Test 和 OOD 
Test 是 对 分 析 结 果 和 设计 结果 的 测试 ,主要 是 对 分 析 设 计 产 生 的 文本 进行 ,是 软件 开发 前 
期 的 关键 性 测试 ;OOP Test 主要 针对 编程 风格 和 程序 代码 实现 进行 测试 ,其 主要 的 测试 内 
容 在 面向 对 象 单 元 测试 和 面向 对 象 集成 测试 中 体现 ;OO Unit Test 是 对 程序 内 部 具体 单一 
的 功能 模块 的 测试 ,如 果 程 序 是 用 C++ 语言 实现 ,主要 就 是 对 类 成 员 函 数 的 测试 ,是 进行 
OO Integrate Test 的 基础 :OO Integrate Test 主要 对 系统 内 部 的 相互 服务 进行 测试 .如 成 
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员 函 数 间 的 相互 作用 ,类 间 的 消息 传递 等 ;OO System Test 是 基于 OO Integrate Test 的 最 
后 阶段 的 测试 ,主要 以 用 户 需 求 为 测试 标准 .需要 借鉴 OOA 或 OOA Test 结果 。 

尽管 上 述 各 阶段 的 测试 构成 了 一 个 相互 作用 的 整体 .但 其 测试 的 主体 、 方 向 和 方法 各 有 
不 同 。 本 节 将 从 OOA、OOD、OOP .单元 测试 .集成 测试 .系统 测试 6 个 方面 分 别 介绍 对 面 
向 对 象 软件 的 测试 。 


9.3.1 面向 对 象 分 析 测 试 


传统 的 面向 过 程 分 析 是 一 个 功能 分 解 的 过 程 ,是 把 一 个 系统 看 成 可 以 分 解 的 功能 集合 。 
这 种 传统 的 功能 分 解 分 析 法 的 着 眼 点 在 于 一 个 系统 需要 什么 样 的 信息 处 理 方法 和 过 程 ,以 
过 程 的 抽象 来 满足 系统 的 需要 。 而 对 一 个 系统 而 言 ,与 传统 分 析 方法 产生 的 结果 相反 ,其 行 
为 是 相对 稳定 的 ,结构 是 相对 不 稳定 的 ,这 更 充分 反映 了 现实 的 特性 。OOA 的 结果 是 为 后 
面 阶段 类 的 选 定 和 实现 .层次 结构 的 组 织 和 实现 提供 平台 。 因 此 ,对 OOA 的 测试 ,应 从 以 
下 方面 考虑 : 对 认定 的 对 象 的 测试 ;对 认定 的 结构 的 测试 ;对 认定 的 主题 的 测试 ;对 定义 的 
属性 和 实例 关联 的 测试 ;对 定义 的 服务 和 消息 关联 的 测试 。 

面向 对 象 分 析 阶 段 的 主要 工作 是 需求 分 析 和 对 类 、 对 象 和 结构 的 设计 。 面 向 对 象 分 析 
是 把 E-R 图 和 语义 网 络 模型 , 即 信息 造型 中 的 概念 ,与 面向 对 象 程序 设计 语言 中 的 封装 、 继 
承 、 多 态 等 概念 结合 在 一 起 而 形成 的 分 析 方 法 ,最 后 通常 是 得 到 问题 空间 的 图 表 形 式 的 描 
述 。OOA 直接 映射 问题 空间 ,全 面 地 将 问题 空间 中 实现 的 功能 抽象 化 。 将 问题 空间 中 的 实 
例 抽 象 为 对 象 ,用 对 象 的 结构 反映 问题 空间 的 复杂 实例 和 复杂 关系 ,用 属性 和 操作 表示 实例 
的 特性 和 行为 。 

在 确定 需求 分 析 以 后 ,会 形成 面向 对 象 的 分 析 文 档 , 因 此 ,该 阶段 的 测试 主要 是 针对 文 
档 的 测试 ,其 考虑 包括 6 个 方面 。 

1) 对 认定 的 对 象 的 测试 

在 面向 对 象 的 软件 需求 分 析 中 ,将 问题 空间 中 的 结构 .设备 .事件 .涉及 的 人 员 等 实例 抽 
象 为 对 象 。 在 面向 对 象 分 析 的 测试 中 ,应 该 重点 测试 以 下 内 容 : 

(1) 认定 的 对 象 是 否 全 面 ,问题 空间 中 所 有 涉及 的 实例 是 否 都 反映 在 认定 的 抽象 对 
象 中 ; 

(2) 认定 的 对 象 是 否 具 有 多 个 属性 。 只 有 一 个 属性 的 对 象 通常 应 看 成 其 他 对 象 的 属 
性 ,而 不 是 抽象 为 独立 的 对 象 ; 

(3) 对 认定 为 同一 对 象 的 实例 是 否 有 共同 的 ,区别 于 其 他 实例 的 共同 属性 ; 

(4) 对 认定 为 同一 对 象 的 实例 是 否 提供 或 需要 相同 的 服务 ,如 果 服 务 随 着 不 同 的 实例 
而 变化 ,认定 的 对 象 就 需要 分 解 或 利用 继承 性 来 分 类 表示 ; 

(5) 如 果 系 统 没 有 必要 始终 保持 对 象 代表 的 实例 的 信息 ,提供 或 者 得 到 关于 它 的 服务 ， 
认定 的 对 象 就 无 必要 ; 

(6) 认定 的 对 象 的 名 称 应 该 尽量 准确 、 适 用 。 

2) 对 认定 的 结构 的 测试 

认定 的 结构 指 的 是 多 种 对 象 的 组 织 方式 ,用 来 反映 问题 空间 中 的 复杂 实例 和 复杂 关系 。 
认定 的 结构 分 为 两 种 : 分 类 结构 和 组 装 结构 。 分 类 结构 主要 描述 问题 空间 中 实例 的 一 般 与 
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特殊 的 关系 ,而 组 装 结构 则 着 重 描述 问题 空间 中 实例 整体 与 局 部 的 关系 。 

(1) 对 处 于 高 层 的 对 象 ,是 否 在 问题 空间 中 含有 不 同 于 下 一 层 对 象 的 特殊 可 能 性 。 

(2) 对 处 于 同一 低层 的 对 象 ,是 否 能 抽象 出 在 现实 中 有 意义 的 更 一 般 的 上 层 对 象 。 

(3) 对 所 有 认定 的 对 象 ,是 否 能 在 问题 空间 内 向 上 层 抽象 出 在 现实 中 有 意义 的 对 象 ,高 
层 的 对 象 的 特性 是 否 完 全 体现 下 层 的 共性 。 
(4) 低层 的 对 象 是 否 有 高 层 特性 基础 上 的 特殊 性 。 
3) 对 认定 的 组 装 结构 的 测试 
(1) 整体 (对 象 ) 和 部 件 (对 象 ) 的 组 装 关系 是 否 符合 现实 的 关系 。 
(2) 整体 (对 象 ) 的 部 件 ( 对 象 ) 是 否 在 考虑 的 问题 空间 中 有 实际 应 用 。 
(3) 整体 (对 象 ) 中 是 否 遗 漏 了 反映 在 问题 空间 中 有 用 的 部 件 (对 象 ) 。 
(4) 部 件 (对 象 ) 是 否 能 够 在 问题 空间 中 组 装 新 的 有 现实 意义 的 整体 (对 象 ) 。 
4) 对 认定 的 主题 的 测试 
主题 是 在 对 象 和 结构 的 基础 上 更 高 一 层 的 抽象 ,是 为 了 提供 面向 对 象 分 析 结果 的 可 见 
对 主题 层 的 测试 应 该 考虑 以 下 方面 : 
(1) 如 果 主 题 个 数 多 且 不 合理 ,就 要 对 有 较 密 切 属性 和 服务 的 主题 进行 归并 ; 
(2) 主题 所 反映 的 一 组 对 象 和 结构 是 否 具有 相同 和 相近 的 属性 和 服务 ; 
(3) 认定 的 主题 是 否 是 对 象 和 结构 更 高 层 的 抽象 ,是 否 便 于 理解 OOA 结果 的 概貌 ; 
(4) 主题 间 的 消息 联系 (抽象 ) 是 否 代表 了 主题 所 反映 的 对 象 和 结构 之 间 的 所 有 可 能 
关联 。 

5) 对 定义 的 属性 和 实例 关联 的 测试 

属性 是 用 来 描述 对 象 或 结构 所 反映 的 实例 的 特性 。 而 实例 关联 是 反映 实例 集合 间 的 映 
射 关 系 。 对 属性 和 实例 关联 的 测试 从 如 下 方面 考虑 : 

(1) 定义 的 属性 是 否 对 相应 的 对 象 和 分 类 结构 的 每 个 现实 实例 都 适用 ; 

(2) 定义 的 属性 在 现实 世界 是 否 与 这 种 实例 关系 密切 ; 

(3) 定义 的 属性 在 问题 空间 是 否 与 这 种 实例 关系 密切 ; 

(4) 定义 的 属性 是 否 能 够 不 依赖 于 其 他 属性 被 独立 理解 ; 

(5) 定义 的 属性 在 分 类 结构 中 的 位 管 是 否 恰当 ,低层 对 象 的 共有 属性 是 否 在 上 层 对 象 
属性 中 体现 ; 

(6) 在 问题 空间 中 每 个 对 象 的 属性 是 否定 义 完整 

(7) 定义 的 实例 关联 是 否 符合 现实 ; 

(8) 在 问题 空间 中 实例 关联 是 否定 义 完整 。 

6) 对 定义 的 服务 和 消息 关联 的 测试 

定义 的 服务 ,就 是 定义 的 每 一 种 对 象 和 结构 在 问题 空间 所 要 求 的 行为 。 由 于 在 问题 空 
间 中 ,实例 之 间 存 在 必要 的 通信 .因此 在 面向 对 象 分 析 中 相应 需要 定义 消息 关联 。 对 定义 的 
服务 和 消息 关联 的 测试 从 如 下 方面 进行 : 

(1) 对 象 和 结构 在 问题 空间 的 不 同 状态 是 否定 义 了 相应 的 服务 ; 

(2) 对 象 或 结构 所 需要 的 服务 是 否 都 定义 了 相应 的 消息 关联 ; 

(3) 定义 的 消息 关联 所 指引 的 服务 提供 是 否 正确 ; 

(4) 沿 着 消息 关联 执行 的 线程 是 否 合理 ,是否 符合 现实 过 程 ; 


麻 
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(5) 定义 的 服务 是 否 重复 ,是 否定 义 了 能 够 得 到 的 服务 。 
9.3.2 面向 对 象 设计 测试 


在 面向 对 象 设计 阶段 ,主要 工作 是 对 面向 对 象 分 析 的 阶段 归纳 出 的 类 和 结构 进行 详细 
的 设计 ,从 而 构造 成 类 库 ,实现 分 析 结 果 对 问题 空间 的 抽象 。 由 此 可 见 , 面 向 对 象 设计 是 对 
面向 对 象 分 析 的 进一步 细 化 和 更 高 层 的 抽象 。 在 设计 完成 以 后 ,同样 会 形成 面向 对 象 的 设 
计 文档 。 因 此 ,该 阶段 的 测试 同样 是 针对 文档 的 测试 ,其 考虑 包括 3 个 方面 。 

1) 对 确认 的 类 的 测试 

OOD 确认 的 类 可 以 是 OOA 中 认定 的 对 象 ,也 可 以 是 对 象 所 需要 的 服务 的 抽象 ,对 象 
所 具有 的 属性 的 抽象 。 确 认 的 类 原则 上 应 该 尽量 保持 基础 性 ,这 样 才 便 于 维护 和 重用 。 测 
试 中 应 从 以 下 方面 重点 关注 确认 的 类 : 

(1) 是 否 涵盖 了 OOA 中 所 有 认定 的 对 象 ; 

(2) 是 否 能 体现 OOA 中 定义 的 属性 ; 

(3) 是 否 能 实现 OOA 中 定义 的 服务 ; 

(4) 是 否 对 应 着 一 个 含义 明确 的 数据 抽象 ; 

(5) 是 否 尽 可 能 少 地 依赖 其 他 类 ; 

(6) 类 中 的 方法 是 否 为 单 用 途 。 

2) 对 构造 的 类 层次 结构 的 测试 

为 能 充分 发 挥 面 向 对 象 的 继承 共享 特性 ,通常 OOD 的 类 层次 结构 基于 OOA 中 产生 的 
分 类 结构 的 原则 来 组 织 ,着 重 体现 父 类 和 子 类 间 一 般 性 和 特殊 性 。 类 层次 结构 应 该 能 在 解 
空间 中 ,构造 实现 全 部 功能 的 结构 框架 。 测 试 中 应 重点 注意 : 

(1) 类 层次 结构 是 否 包 含 了 所 有 定义 的 类 ; 

(2) 是 否 能 体现 OOA 中 所 定义 的 实例 关联 ; 

(3) 是 否 能 实现 OOA 中 所 定义 的 消息 关联 ; 

(4) 子 类 是 否 具 有 父 类 没有 的 新 特性 ; 

(5) 子 类 间 的 共同 特性 是 否 完 全 在 父 类 中 得 以 体现 。 

3) 对 类 库 的 支持 的 测试 

对 类 库 的 支持 虽然 也 属于 类 层次 结构 的 组 织 问题 ,但 其 强调 的 重点 是 再 次 软件 开发 的 
重用 。 由 于 它 并 不 直接 影响 当前 软件 的 开发 和 功能 实现 .因此 将 其 单独 提出 来 测试 ,也 可 作 
为 对 高 质量 类 层次 结构 的 评估 。 测 试 中 应 重点 注意 : 

(1) 一 组 子 类 中 关于 某 种 含义 相同 或 基本 相同 的 操作 ,是否 有 相同 的 接口 ; 

(2) 类 中 方法 功能 是 否 较 单一 ,相应 的 代码 行 是 否 较 少 ; 

(3) 类 的 层次 结构 是 否 深度 大 ,宽度 小 。 


9.3.3 面向 对 象 编程 测试 


面向 对 象 程序 是 通过 对 类 的 操作 来 实现 软件 功能 的 。 更 确切 地 说 ,是 能 正确 实现 功能 
的 类 ,通过 消息 传递 来 协同 实现 设计 要 求 。 因 此 .在 面向 对 象 编程 的 测试 中 .需要 我 们 忽略 
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类 功能 实现 的 细则 ,将 测试 的 目光 集中 在 类 功能 的 实现 和 相应 的 面向 对 象 程序 风格 上 ,其 考 
虑 包括 两 个 方面 。 


1. 数据 成 员 是 否 满足 数据 封装 的 要 求 

数据 封装 是 数据 和 与 数据 有 关 的 操作 的 集合 。 检 查 数据 成 员 是 否 满足 数据 封装 的 要 
求 ,基本 原则 是 数据 成 员 是 否 被 外 界 ( 数 据 成 员 所 属 的 类 或 子 类 以 外 的 调用 ) 直 接 调用 。 更 
直观 地 说 , 当 改 变数 据 成 员 的 结构 时 ,是 否 影响 了 类 的 对 外 接口 ,是 否 会 导致 相应 外 界 必须 
改动 。 但 是 ,有 时 强制 的 类 型 转换 会 破坏 数据 的 封装 特性 。 


2. 类 是 否 实现 了 要 求 的 功能 

类 所 实现 的 功能 ,都 是 通过 类 的 成 员 函 数 执行 。 在 测试 类 的 功能 实现 时 ,应 该 首先 保证 
类 成 员 函 数 的 正确 性 。 单 独 地 看 待 类 的 成 员 函 数 ,与 面向 过 程 程序 中 的 函数 或 过 程 没 有 本 
质 的 区 别 , 几 乎 所 有 传统 的 单元 测试 中 所 使 用 的 方法 ,都 可 在 面向 对 象 的 单元 测试 中 使 用 。 
有 具体 的 测试 方法 在 面向 对 象 的 单元 测试 中 介绍 。 类 函数 成 员 的 正确 行为 只 是 类 能 够 实现 要 
求 功 能 的 基础 ,类 成 员 函 数 间 的 作用 和 类 之 间 的 服务 调用 是 单元 测试 无 法 确定 的 。 因 此 , 需 
要 进行 面向 对 象 的 集成 测试 。 具 体 的 测试 方法 在 面向 对 象 的 集成 测试 中 介绍 。 需 要 着 重 声 
明 ,测试 类 的 功能 ,不 能 仅 满 足 于 代码 能 无 错 运行 或 被 测试 类 能 提供 的 功能 无 错 ,应 该 以 
OOD 生成 的 需求 文档 为 依据 ,检测 类 提供 的 功能 是 否 满足 设计 的 要 求 、 是 否 有 缺陷 。 如 有 
必要 ,还 应 该 参照 OOA 的 初始 分 析 结 果 。 


9.3.4 面向 对 象 单元 测试 


面向 对 象 软件 的 单元 概念 发 生 了 变化 ,封装 驱动 了 类 和 对 象 的 定义 。 这 意味 着 每 个 类 
和 类 的 实例 (对 象 ) 包 装 了 属性 (数据 ) 和 操纵 这 些 数据 的 操作 (也 称 为 方法 或 服务 ), 而 不 是 
个 体 的 模块 。 最 小 的 可 测试 单位 是 封装 的 类 或 对 象 。 类 包含 一 组 不 同 的 操作 ,并 且 某 些 特 
殊 操作 可 能 作为 类 的 一 部 分 特殊 功能 存在 (例如 类 中 的 静态 函数 )。 因 此 ,单元 测试 的 意义 
发 生 了 较 大 的 改变 ,实际 上 ,面向 对 象 的 单元 测试 可 以 认为 是 对 类 的 测试 。 

面向 对 象 软件 的 类 测试 与 传统 软件 的 单元 测试 相对 应 ,但 和 传统 的 单元 测试 不 一 样 。 
有 具体 地 ,传统 的 测试 方法 只 适用 于 类 中 方法 的 测试 .不 适用 于 类 的 整体 测试 .同时 孤立 地 检 
查 类 中 方法 的 正确 性 不 足以 保证 类 在 整体 上 是 正确 的 。 面 向 对 象 软件 的 类 测试 是 由 封装 在 
类 中 的 操作 和 类 的 状态 行为 所 驱动 的 。 因 此 .类 测试 不 能 孤立 地 测试 单个 操作 ,要 将 操作 作 
为 类 的 一 部 分 ,同时 要 把 对 象 与 其 状态 结合 起 来 .进行 对 象 状态 行为 的 测试 。 


1. 测试 驱动 的 实现 方式 

由 于 被 测 的 类 一 般 不 可 能 单独 执行 .需要 实现 测试 驱动 ,以 实现 对 目标 类 的 测试 。 测 试 
驱动 的 设计 本 质 是 通过 创建 被 测 类 的 实例 和 测试 这 些 实例 的 行为 来 测试 类 。 下 述 例子 代码 
为 一 个 Java 矩形 Rectangle 类 .下 面 以 编写 Rectangle 类 测试 的 驱动 为 例 , 介 绍 常见 的 几 种 
测试 驱动 的 设计 方法 。 


软件 测试 实用 方法 与 技术 


(1) 利用 main 函数 。 利 用 main 函数 方法 实现 测试 驱动 是 一 个 最 为 简单 的 方式 ,直接 
将 每 个 测试 用 例 写 人 main 函数 。 示 例如 下 : 


(2) 嵌入 静态 方法 。 在 被 测 类 中 嵌入 静态 方法 ,在 静态 方法 内 部 实现 测试 用 例 的 执行 ， 
然后 调用 该 静态 方法 。 示 例如 下 : 
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(3) 设计 独立 测试 类 。 将 测试 代码 从 开发 代码 中 完全 独立 出 来 ,通过 独立 的 测试 类 处 
理 被 测 类 的 实例 化 和 方法 ,并 对 结果 进行 统计 。 示 例如 下 : 





软件 测试 实用 方法 与 技术 





2. 面向 对 象 单元 测试 的 目标 

(1) 类 功能 正确 性 。 功 能 正确 性 是 类 测试 的 基本 目标 :也 是 定量 分 析 预 期 逻辑 功能 被 
正确 封装 实现 的 可 信和 度 。 类 的 功能 正确 性 包括 行为 正确 性 和 实现 正确 性 。 行 为 正确 性 用 来 
验证 目标 类 是 否 正确 提供 预期 设 定 的 服务 ;实现 正确 性 则 主要 验证 类 实现 代码 是 否 与 规格 
说 明 一 致 。 

(2) 类 完整 性 。 检 查 目 标 类 中 实现 的 迎 辑 过 程 是 单元 测试 的 一 个 主要 方面 。 完 整 性 可 
以 用 来 确定 目标 类 是 否 具备 了 所 需 的 功能 和 变量 以 及 类 应 具有 的 公共 接口 。 另 外 ,完整 性 
还 要 求 确定 一 个 类 的 方法 是 否 完 整地 执行 了 规定 的 功能 。 

(3) 早期 测试 。 为 了 让 软件 缺陷 尽早 被 发 现 并 修复 ,以 减少 延 后 效应 带 来 的 成 本 放大 
效应 ,应 该 对 类 尽 可 能 早 的 测试 ,通常 在 该 类 与 其 他 类 集成 之 前 进行 测试 。 

另外 ,对 一 个 类 单独 测试 并 不 能 保证 该 类 已 经 得 到 充分 的 测试 ,还 需要 引入 多 个 测试 用 
例 ,以 测试 类 中 方法 的 交互 和 对 象 在 测试 期 间 的 状态 。 类 似 传统 功能 测试 ,可 以 把 类 中 方法 
作为 黑 盒 进 行 确认 ,把 每 个 成 员 函 数 作为 一 个 单独 实体 。 一 个 对 象 在 某 个 时 刻 的 状态 等 价 
于 这 时 所 有 数据 成 员 的 聚合 状态 ,类 的 方法 使 用 各 种 机 制 来 操作 数据 成 员 。 一 个 类 的 正确 
性 需要 验证 数据 成 员 是 否 已 代表 了 对 象 预期 的 状态 ,成 员 函 数 是 否 能 够 正确 地 对 对 象 数据 
进行 操作 。 


9.3.5 面向 对 象 集成 测试 


在 面向 对 象 的 术语 中 ,集成 测试 的 一 个 主要 目标 是 确保 每 个 类 或 组 件 对 象 的 消息 以 正 
确 的 顺序 发 送 和 接收 并 确保 接收 消息 的 外 部 对 象 的 状态 获得 预期 的 影响 。 如 图 9-1 所 示 ， 
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给 出 了 指令 生成 序列 图 :图 中 箭头 即 代 表 类 间 消 息 的 传递 。 
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图 9-1 面向 对 象 的 序列 图 示例 


区 别 于 传统 软件 的 功能 分 解 ,面向 对 象 软件 是 通过 合成 来 构造 软件 的 ,因而 集成 是 面向 
对 象 软件 开发 中 最 重要 的 工作 。 集 成 测试 主要 根据 系统 中 相关 类 的 层次 关系 ,检查 类 之 间 
的 相互 作用 的 正确 性 , 即 检查 各 相关 类 之 间 消 息 连接 的 合法 性 、 子 类 的 继承 与 父 类 的 一 致 
性 ` 动 态 绑 定 的 合法 性 .类 间 协 同 完成 系统 功能 的 正确 性 等 。 因 面向 对 象 软件 没有 层次 的 控 
制 结构 ,传统 的 自 项 向 下 和 自 底 向 上 的 集成 测试 策略 并 不 适用 于 面向 对 象 方法 构造 的 软件 ， 
这 是 因为 面向 对 象 的 软件 的 执行 实际 上 是 执行 一 个 由 信息 连接 起 来 的 方法 序列 ,而 这 个 方 
法 序列 往往 是 由 外 部 事件 驱动 的 。 

此 外 ,在 各 个 方法 分 别 测试 之 后 ,每 次 任 选 一 个 方法 集成 到 类 中 逐步 进行 测试 直至 形成 
一 个 完整 的 类 的 集成 策略 也 未 必 合 适 . 原 因 是 各 个 方法 之 间 可 能 有 相互 作用 , 某 一 方法 可 能 
要 求 对 象 处 于 某 个 特定 的 状态 而 该 状态 必须 由 其 他 方法 设 壮 ,所 以 还 需要 考虑 集成 的 次 序 
问题 。 


1. 面向 对 象 的 集成 测试 策略 

面向 对 象 软件 的 集成 测试 有 两 种 策略 。 

1) 基于 线程 的 测试 

由 系统 的 一 个 输入 事件 作为 激励 ,对 其 触发 的 一 组 类 进行 测试 ,执行 相应 的 方法 /消息 
处 理 路 径 , 最 后 终止 于 某 一 输出 事件 。 应 用 回归 测试 对 已 测试 过 的 类 集合 重新 执行 一 次 ,以 
保证 加 入 新 类 时 不 会 产生 意外 的 结果 。 

由 于 基于 线程 的 测试 策略 比较 符合 一 般 的 认 知 规律 ,并 且 可 以 根据 需求 规格 说 明 的 序 
列 图 生成 消息 .并 跟踪 触发 的 类 及 类 间 消 息 的 传递 互动 过 程 .因此 .该 策略 在 实际 测试 中 较 
为 常见 。 以 图 9-1 为 例 , 根 据 基 于 线程 的 测试 策略 .我 们 可 以 设计 测试 用 例 : 向 类 “遥控 指 
令 数据 生成 主 控 对 象 ”发 出 “从 内 存 中 读 取 控 制 指令 信息 ”, 继 而 引发 后 续 与 “控制 








WE 
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指令 转换 序列 “遥控 指令 生成 “指令 数据 反 演 “数据库 ”类 之 间 的 交互 作用 ,通过 检查 类 消 
息 传递 和 交互 作用 的 正确 性 进行 集成 测试 。 

2) 基于 使 用 的 测试 

首先 通过 测试 独立 类 (是 系统 中 已 经 测试 正确 的 某 类 ) 来 开始 构造 系统 ,在 独立 类 测试 
完成 后 ,继续 测试 下 一 层 继承 独立 类 的 类 ( 称 为 依赖 类 )。 按 照 继承 依赖 关系 对 各 类 进行 测 
试 , 直 到 整个 系统 被 构造 完成 为 止 。 

2. 面向 对 象 软件 的 集成 测试 过 程 

测试 过 程 的 第 一 步 是 进行 静态 测试 ,针对 程序 的 结构 ,检测 其 是 否 符合 设计 要 求 。 通 过 
专业 的 测试 软件 提供 的 "可 逆 性 工程 "的 功能 ,得 出 源 程序 的 类 系统 图 和 函数 功能 调用 关系 
图 。 将 “可 逆 性 工程 得 到 的 结果 与 OOD 的 结果 相 比 较 , 检 测 程序 结构 和 实现 上 是 否 有 缺 
陷 ,是否 达到 了 OOP 的 设计 要 求 。 

另外 ,类 似 于 2.1 节 ,面向 对 象 的 集成 测试 同样 也 需要 进行 静态 测试 ,包括 代码 审查 . 静 
态 分 析 .逻辑 测试 和 文档 审查 等 。 其 中 代码 审查 主要 使 用 基于 面向 对 象 的 规则 集 , 例如 
MISRA-C++ : 2008、HIC++ 等 规则 集 。 表 9-2 列举 了 部 分 MISRA-C++ : 2008 规则 集 。 详 
细 的 规则 集 可 参见 相关 资料 文档 。 


表 9-2 MISRA-C++ : 2008 部 分 规则 集 




















MISRA-C++: 
时 i 查 项 s 别 | 
序号 审查 项 目 类 别 2008 标识 
Assi 站 > 强制 类 05-00-01 
1 ssignment operation in expression 强制 类 0 
2 No brackets to loop body 强制 类 06-03-01 
00-01-11 
3 Unused cedure amete: 强制 类 
nused procedure parameter 强制 类 0 
Proc/Program contains Variable (s) declared but not used in| 强制 类 pe 
code analysed 
s Procedure contains UR data flow anomalies 强制 类 08-05-01 
00-01-06 
6 DU data flow anomalies found 强制 类 00-01-09 
7 Procedure has more than one exit point 强制 类 06-06-05 
8 Function has no return statement 强制 类 08-04-03 
9 Ellipsis used in procedure parameter list 强制 类 08-04-01 
10 Use of setimp/longjmp 强制 类 17-00-05 




















测试 工具 Testbed 支持 多 种 面向 对 象 的 代码 规则 集 .其 可 以 通过 扫描 源 代码 很 容易 地 
生成 规则 违反 报告 表 。 

测试 过 程 的 第 二 步 是 动态 测试 . 即 根据 静态 测试 得 出 的 函数 功能 调用 关系 图 或 类 关系 
图 作为 参考 ,并 依据 需求 规格 说 明 ,按照 既定 的 集成 测试 方法 完成 测试 功能 覆盖 。 
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3. 面向 对 象 的 集成 测试 方法 

具体 的 面向 对 象 软件 集成 测试 方法 主要 有 以 下 6 种 。 

(1) 基于 状态 的 测试 。 即 利用 有 限 状 态 自 动机 的 相关 理论 来 对 面向 对 象 系统 进行 
集成 。 

(2) 基于 事件 的 测试 。 此 方法 用 同步 序列 来 表示 事件 之 间 的 关系 ,依据 同步 序列 来 集 
成 各 对 象 ,并 在 此 基础 上 进行 测试 。 

(3) 基于 形式 规约 的 测试 。 应 用 代数 规约 技术 来 形式 化 描述 类 的 行为 ,进而 进行 测试 。 

(4) 确定 性 与 可 达 性 测试 技术 。 此 方法 主要 通过 执行 预定 的 某 个 同步 序列 来 检验 某 个 
确定 性 的 结果 。 

(5) 变异 测试 。 这 是 一 种 错误 驱动 测试 , 即 针对 某 类 特定 程序 错误 ,通过 检验 测试 数据 
集 的 排 错 能 力 来 判断 测试 的 充分 性 。 

(6) 基于 UML 的 测试 。 利 用 面向 对 象 建 模 语言 UML 的 类 图 .状态 图 和 顺序 图 等 提供 
面向 对 象 系统 的 信息 来 产生 测试 用 例 。 


9.3.6 面向 对 象 系统 测试 


通过 单元 测试 和 集成 测试 , 仅 能 保证 软件 开发 的 功能 得 以 实现 ,不 能 确认 在 实际 运行 
时 ,是 否 满足 用 户 的 需要 ,是 否 存 在 大 量 实际 使 用 条 件 下 会 被 诱发 产生 错误 的 隐患 。 为 此 ， 
对 完成 开发 的 软件 必须 经 过 规范 的 系统 测试 。 换 个 角度 说 ,开发 完成 的 软件 仅仅 是 实际 投 
入 使 用 系统 的 一 个 组 成 部 分 ,需要 测试 它 与 系统 其 他 部 分 配套 运行 的 表现 ,以 保证 在 系统 各 
部 分 协调 工作 的 环境 下 也 能 正常 工作 。 

系统 测试 不 仅 是 确认 系统 在 实际 运行 时 , 它 是 否 满足 用 户 的 需要 ,也 是 对 软件 开发 设计 
的 再 确认 。 因 此 在 进行 系统 测试 时 ,应 该 参考 OOA 的 结果 ,对 应 描述 的 对 象 . 属 性 和 各 种 
服务 。 其 测试 内 容 包括 以 下 5 种 。 


1. 功能 测试 

功能 测试 是 对 软件 需求 规格 说 明 或 设计 文档 中 的 功能 需求 逐 项 进行 的 测试 ,以 验证 其 
功能 是 否 满足 要 求 。 功 能 测试 一 般 需 进行 : 

(1) 用 有 效 值 的 等 价 类 输入 数据 值 测试 ; 

(2) 用 无 效 值 的 等 价 类 输入 数据 值 测试 ; 

(3) 进行 每 个 功能 的 合法 边界 值 和 非法 边界 值 输入 的 测试 ; 

(4) 用 一 系列 真实 的 数据 类 型 和 数据 值 运行 .测试 超 负 荷 . 饱 和 及 其 他 “最 坏 情况 ”的 
结果 ; 

(5) 在 配置 项 测试 时 对 配置 项 控制 流程 的 正确 性 、 合 理性 等 进行 验证 。 

2. 强度 测试 

强度 测试 是 强制 软件 运行 在 不 正常 到 发 生 故 障 的 情况 下 (设计 的 极限 状态 到 超出 极限 
状态 ) ,检验 软件 可 以 运行 到 何 种 程度 的 测试 。 强 度 测试 一 般 需 : 

(1) 提供 最 大 人 处理 的 信息 量 ; 

(2) 提供 数据 能 力 的 饱和 实验 指标 ; 


下 
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(3) 提供 最 大 存储 范围 (如 常 驻 内 存 、 缓 冲 、 表 格 区 、 临 时 信息 区 ); 

(4) 在 能 力 降级 时 进行 测试 ; 

(5) 在 人 为 错误 (如 寄存 器 数据 跳 变 错误 的 接口 ) 状 态 下 进行 软件 反应 的 测试 ; 

(6) 通过 启动 软件 过 载 安全 装置 (如 临界 点 警报 .过载 溢 出 功能 .停止 输 入 ` 取 消 低速 设 


备 等 ) 生 成 必要 条 件 , 进 行 计算 过 载 的 饱和 测试 ; 


(7) 进行 持续 一 段 规定 的 时 间 , 而 且 连 续 不 能 中 断 的 测试 。 


3. 性 能 测试 
性 能 测试 是 对 软件 需求 规格 说 明 或 设计 文档 中 规定 的 性 能 需求 逐 项 进行 的 测试 ,以 验 


证 其 性 能 是 否 满足 要 求 。 性 能 测试 一 般 需 : 


(1) 测试 在 获得 定量 结果 时 程序 计算 的 精确 性 (处 理 精度 ); 

(2) 测试 其 时 间 特 性 和 实际 完成 功能 的 时 间 ( 响 应 时 间 ); 

(3) 测试 为 完成 功能 所 处 理 的 数据 量 ; 

(4) 测试 程序 运行 所 占用 的 空间 ; 

(5) 测试 其 负荷 潜力 ; 

(6) 测试 配置 项 各 部 分 的 协调 性 ; 

(7) 在 系统 测试 时 测试 软件 性 能 和 硬件 性 能 的 集成 ; 

(8) 在 系统 测试 时 测试 系统 对 并 发 事件 和 并 发 用 户 访问 的 处 理 能 力 。 


4. 安全 测试 
安全 性 测试 是 检验 软件 中 已 存在 的 安全 性 ,安全 保密 性 措施 是 否 有 效 的 测试 。 测 试 应 


尽 可 能 在 符合 实际 使 用 的 条 件 下 进行 。 安 全 性 测试 一 般 包 括 : 


(1) 对 安全 性 关键 的 软件 部 件 ,必须 单独 测试 其 安全 性 需求 ; 
(2) 在 测试 中 全 面 检验 防止 危险 状态 措施 的 有 效 性 和 每 个 危险 状态 下 的 反应 ; 
(3) 对 设计 中 用 于 提高 安全 性 的 结构 ,算法 、 容 错 、 元 余 及 中 断 处 理 等 方案 ,必须 进行 针 


对 性 测试 ; 


(4) 对 软件 处 于 标准 配置 下 其 处 理 和 保护 能 力 的 测试 ; 
(5) 应 进行 对 异常 条 件 下 系统 /软件 的 处 理 和 保护 能 力 的 测试 (以 表明 不 会 因为 可 能 的 


单个 或 多 个 输入 错误 而 导致 不 安全 状态 ); 


(6) 对 输入 故障 模式 的 测试 ; 

(7) 必须 包含 边界 、 界 外 及 边界 结合 部 的 测试 ; 

(8) 对 “0”、 穿 越 *0” 以 及 从 两 个 方向 趋 近 于 “0” 的 输入 值 的 测试 ; 

(9) 必须 包括 在 最 坏 情 况 配 置 下 的 最 小 输入 和 最 大 输入 数据 率 的 测试 ; 
(10) 对 安全 性 关键 的 操作 错误 的 测试 ; 

(11) 对 具有 防止 非法 进入 软件 并 保护 软件 的 数据 完整 性 能 力 的 测试 ; 
(12) 对 双 工 切换 、 多 机 替换 的 正确 性 和 连续 性 的 测试 ; 

(13) 对 重要 数据 的 抗 非法 访问 能 力 的 测试 。 


5. 恢复 测试 
恢复 性 测试 是 对 有 恢复 或 重 兽 功能 的 软件 的 每 一 类 导致 恢复 或 重 兽 的 情况 逐一 进行 的 


测试 ,以 验证 其 恢复 或 重 管 功能 。 恢 复 性 测试 是 要 证 实在 克服 硬件 故障 后 .系统 能 否 正常 地 
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继续 进行 工作 , 且 不 对 系统 造成 任何 损害 。 恢 复 性 测试 一 般 需 进 行 : 
(1) 探测 错误 功能 的 测试 ; 
(2) 能 否 切 换 或 自动 启动 备用 硬件 的 测试 ; 
(3) 在 故障 发 生 时 能 否 保护 正在 运行 的 作业 和 系统 状态 的 测试 ; 
(4) 在 系统 恢复 后 ,能 否 从 最 后 记录 下 来 的 无 错误 状态 开始 继续 执行 作业 的 测试 。 
除 以 上 测试 外 ,还 可 以 根据 需求 进行 容量 测试 .容错 性 测试 . 易 用 性 测试 以 及 安装 / 印 载 
测试 等 。 





CHAPTER 10 





FPGA 测试 


本 章 首先 介绍 可 编程 逻辑 器 件 的 基本 概念 和 发 展 历程 ,然后 介绍 可 编程 旬 辑 器 件 测试 
相关 技术 及 方法 。 


10.1 FPGA 测试 概述 


10.1.1 可 编程 逻辑 器 件 的 基本 概念 


可 编程 迎 辑 器 件 (programmable logic device, PLD) 源 于 20 世纪 70 年 代 , 是 在 专用 集 
成 电路 (application specific integrated circuit,ASIC) 基 础 上 发 展 起 来 的 一 种 新 型 多 辑 器 件 。 
随 着 基于 计算 机 的 电子 设计 自动 化 (electronic device automation ,EDA) 技 术 不 断 发 展 进 
步 , 可 编程 多 辑 器 件 逐 渐 成 为 当今 数字 机 系统 设计 的 主要 硬件 平台 。 相 比 ASIC 电路 ,可 编 
程 旬 辑 器 件 的 主要 特点 是 完全 由 用 户 通过 软件 进行 编程 和 配置 ,从 而 完成 某 种 特定 的 功能 ， 
且 可 以 反复 擦 除 ,从 而 赋予 数字 系统 设计 更 多 的 便利 和 灵活 性 ,缩短 数字 系统 设计 的 周期 ， 
降低 系统 开发 的 成 本 。 

常见 的 可 编程 迎 辑 器 件 产品 主 要 有 可 编程 只 读 存 储 器 (programmable read only memory， 
PROM) 现场 可 编程 风 辑 阵列 (field programmable logic array,FPLA)、 可 编程 阵列 迎 辑 
(programmable array logic, PAL) 、 可 擦 除 的 可 编程 逻辑 阵列 (erasable programmable logic 
array, EPLA) 复杂 可 编程 巡 辑 器 件 (complex programmable logic device, CPLD) 和 现场 可 编程 
逻辑 门 阵 列 (field programmable gate array,FPGA) 等 类 型 。 不 同类 型 的 可 编程 多 辑 器 件 的 结 
构 ` 实 现 方法 各 不 相同 。 

按照 编程 工艺 的 差异 ,可 编程 逻辑 器 件 分 为 4 类 : 

(1) 熔 丝 (fuse) 和 反 熔 丝 Cantifuse) 可 编程 器 件 ; 

(2) 可 控 除 的 可 编程 只 读 存 储 器 CUEPROMD 编程 器 件 ; 

(3) 电信 号 可 控 除 可 编程 只 读 存 储 器 (EEPROMD) 编 程 器 件 ( 如 CPLD); 

(4) SRAM 编程 器 件 ( 如 FPGA) 。 

在 工艺 分 类 中 ,前 3 类 可 编程 迎 辑 器 件 属于 非 易 失 性 器 件 ,编程 后 配置 数据 将 保留 在 器 
件 芯片 中 ,第 4 类 为 易 失 性 器 件 , 掉 电 后 .配置 数据 将 会 丢失 ,实际 应 用 中 ,每 次 上 电 后 需要 
重新 进行 数据 配置 。 
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10.1.2 硬件 描述 语言 的 发 展 历程 


硬件 描述 语言 (hardware description language, HDL) 是 一 种 用 形式 化 方法 来 描述 数字 
电路 和 系统 的 语言 。 数 字 电 路 系统 开发 人 员 通 常 采 用 自 项 向 下 的 方法 (从 抽象 到 具体 ) 描 述 
设计 意图 ,然后 逐 层 分 解 为 各 个 模块 ,逐步 细 化 设计 思想 。 然 后 ,利用 EDA 工具 逐 层 进行 
仿真 验证 ,把 其 中 需要 转换 为 具体 物理 电路 的 模块 组 合 . 经 由 自动 综合 工具 转换 为 门 级 电路 
网 表 。 最 后 ,利用 可 编程 光 辑 器 件 自动 布局 布线 工具 将 网 表 转 换 为 具体 的 物理 电路 结构 。 
在 实现 具体 的 物理 电路 之 前 ,可 以 利用 硬件 描述 语言 的 门 级 模型 (或 原 语 器 件 ) 代 替 具 体 电 
路 元 件 。 这 些 门 级 模型 的 逻辑 功能 和 延 时 特性 与 真实 的 物理 元 器 件 完 全 一 致 ,因而 可 以 在 
仿真 工具 的 支持 下 .在 综合 前 或 布局 布线 前 进行 思 辑 功能 和 时 序 的 验证 ,以 提高 设计 效率 。 
这 种 高 层次 设计 (high level design) 被 广泛 地 应 用 于 复杂 数字 系统 的 设计 中 。 

硬件 描述 语言 的 发 展 至 今 已 有 三 十 多 年 的 历史 .并 成 功 地 应 用 于 设计 的 各 个 阶段 , 即 建 
模仿 真 、 验 证 和 综合 。 从 20 世纪 80 年 代 至 今 已 出 现 了 上 百 种 硬件 描述 语言 , 极 大 地 促进 
了 数字 系统 设计 自动 化 的 发 展 。 目 前 ,硬件 描述 语言 逐渐 向 标准 化 的 方向 发 展 ,目前 主流 的 
硬件 描述 语言 主要 有 VHDL、Verilog HDL、System Verilog 和 System C 等 ,其 中 VHDL 
和 Verilog HDL 的 应 用 最 为 广泛 。 


10.1.3 VHDL 语言 


VHDL 的 英文 全 称 是 VHSIC(very high speed integrated circuit) HDL ,于 1983 年 由 
美国 国防 部 发 起 创建 ,由 IEEE 进一步 发 展 ,并 于 1987 年 作为 IEEE STD 1076 发 布 。 从 
此 ,VHDL 成 为 硬件 描述 语言 的 业界 标准 之 一 。 此 后 ,各 个 EDA 厂商 相继 推出 支持 VHDL 
的 数字 系统 开发 环境 .VHDL 在 电子 设计 领域 得 到 了 广泛 的 应 用 。 

20 世纪 90 年 代 初 .人 们 发现 VHDL 不 仅 可 以 在 高 层次 上 描述 系统 和 元 器 件 的 行为 ， 
作为 系统 模拟 的 建 模 工具 ,而且 可 以 作为 电路 系统 的 设计 工具 ,可 以 通过 CAD 工具 将 
VHDL 源码 自动 转换 为 文本 方式 表达 的 网 表 文 件 。 进 而 ,EDA 开始 推出 能 够 将 VHDL 的 
部 分 语句 描述 转化 为 具体 电路 网 表 的 软件 工具 。IEEE 于 1993 年 对 VHDL 进行 修订 ,在 更 
高 的 抽象 层次 和 系统 描述 能 力 上 扩展 了 VHDL 的 内 容 , 发 布 新 版 VHDL 语言 标准 , 即 
IEEE Std 1076 一 1993 。 目 前 公布 的 最 新 VHDL 标准 版 本 是 IEEE Std 1076 一 2002。 

VHDL 语言 具有 很 强 的 电路 描述 和 建 模 能 力 , 能 从 多 个 层次 对 数字 系统 进行 建 模 和 描 
述 , 从 而 大 大 简化 了 硬件 设计 任务 ,提高 设计 效率 和 可 靠 性 。 

VHDL 语言 具有 与 具体 硬件 电路 无 关 和 与 设计 平台 无 关 的 特性 .并 且 具 有 良好 的 电 
路 行为 描述 和 系统 描述 的 能 力 .并 在 语言 易 读 性 和 层次 化 、 结 构 化 设计 方面 ,表现 出 了 强 
大 的 生命 力 和 应 用 潜力 。 利 用 VHDL 语言 .能 够 准确 简练 地 表达 设计 者 的 原始 描述 ,经 
过 EDA 工具 综合 处 理 . 最 终生 成 可 供 生 产 的 电路 描述 或 版 图 参数 描述 的 工艺 文件 。 整 
个 过 程 可 以 利用 EDA 工具 自动 完成 .使 得 设计 者 更 加 专注 于 设计 的 正确 性 和 质量 ,减少 
出 错 概率 。 

VHDL 语言 的 设计 实体 (Design Entity) ,程序 包 (Package) ,设计 库 (Library) 为 设计 的 
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可 重用 性 提供 了 强大 的 支持 ,有 利于 设计 封装 和 集成 ,缩短 设计 开发 时 间 。 
10.1.4 Verilog HDL 语言 


Verilog HDL 于 1983 年 由 GDA(Gateway Design Automation) 公 司 的 Phil Moorby 首创 。 
1984 一 1985 年 ,Moorby 设计 了 名 为 Verilog-XL 的 仿真 器 。1986 年 ,Moorby 提出 基于 快速 门 
级 仿真 的 XL 算法 。 随 着 Verilog-XL 算法 的 成 功 ,Verilog HDL 语言 得 到 迅速 发 展 。 

1989 年 ,Candence 公司 收购 GDA 公司 ,Verilog HDL 语言 成 为 Candence 公司 的 私有 
财产 。1990 年 Candence 公司 成 立 OVI(Open Verilog International) 组 织 负责 促进 Verilog 
HDL 语言 的 公开 和 推广 。IEEE 于 1995 年 制定 了 Verilog HDL 语言 标准 , 即 Verilog HDL 
1364 一 1995; 于 2001 年 发 布 Verilog HDL 1364 一 2001 标准 ;于 2005 年 发 布 System 
Verilog IEEE 1800 一 2005 标准 ,这 一 系列 标准 使 得 Verilog HDL 语言 在 综合 、 仿 真 验证 和 
模块 的 可 充 用 方面 得 到 大 幅 提 高 。 

相 比 其 他 类 型 的 硬件 描述 语言 Verilog HDL 具有 如 下 优势 。 

(1) Verilog HDL 是 一 种 通用 型 的 硬件 描述 语言 ,易学 易 用 。Verilog HDL 具有 与 C 
语言 类 似 的 语言 风格 ,因此 对 于 具有 C 语言 程序 设计 经 验 的 开发 人 员 而 言 ,更 易 掌握 和 
学 习 ; 

(2) Verilog HDL 语言 允许 同一 电路 模型 在 不 同 的 抽象 层次 进行 描述 。 设 计 者 可 以 从 
开关 、 门 .RTL(register transfer level) 或 者 行为 级 进行 电 
路 模型 的 定义 。 同 时 ,设计 者 只 需 学 习 一 种 语言 用 于 描述 
电路 的 激励 信号 ,并 进行 层次 化 设计 ; 








(3) 绝 大 部 分 主流 EDA 工具 均 对 Verilog HDL 提供 
良好 的 支持 ,使 得 开发 者 拥有 大 量 可 信赖 的 支持 环境 ; PS 
(4) 编程 语言 接口 (program language interface.PLI) 
是 Verilog HDL 语言 的 重要 特性 之 一 ,使 得 设计 者 可 以 通 功能 仿真 


过 编写 C 语言 代码 访问 由 Verilog HDL 语言 设计 模块 的 
内 部 结构 ,从 而 方便 验证 工程 师 使 用 PLI 按照 自己 的 需求 


来 配置 Verilog HDL 仿真 器 。 忆 











10.1.5 面向 可 编程 逻辑 器 件 的 开发 过 程 布局 布线 
随 着 电子 设计 技术 的 不 断 发 展 ,目前 可 编程 敢 辑 的 设 序 分 析 与 仿真 





计 趋 势 转向 基于 计算 机 的 电子 设计 自动 化 技术 . 即 EDA。 
EDA 技术 依赖 于 功能 强大 的 计算 机 .在 EDA 工具 平台 | 
上 ,以 硬件 描述 语言 或 原理 框图 作为 系统 逻辑 描述 阶段 的 


设计 输入 文件 .自动 完成 编译 、 约 简 、 分 割 综 合 ,布局 布线 


和 仿真 测试 ,直至 实现 所 要 求 的 数字 电路 系统 。 典 型 的 可 
编程 多 辑 器 件 的 开发 过 程 如 图 10-1 所 示 。 国生 和 的 天生 全 和 
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1. 设计 


设计 是 以 硬件 描述 语言 或 者 图 形 化 的 方法 描述 所 要 实现 的 电路 模型 的 过 程 。 

1) 硬件 描述 语言 输入 

使 用 硬件 描述 语言 .采用 自 项 向 下 的 层次 化 方法 ,以 代码 的 形式 描述 电路 的 功能 和 时 序 
关系 ,建立 可 供 EDA 工具 识别 的 电路 模型 。 常 用 的 建 模 方式 有 门 级 建 模 、 数 据 流 建 模 和 行 
为 级 建 模 。 该 方式 便于 在 不 同 的 层次 开展 电路 的 仿真 验证 工作 ,上 且 开发 模块 的 可 重用 性 和 
可 移植 性 更 好 , 且 便 于 大 规模 复杂 设计 的 协同 开发 。 

2) 图 形 输入 

图 形 通 常 包括 状态 图 .波形 图 输入 和 原理 图 输入 等 方法 。 状 态 图 输入 方法 即 根据 电路 
的 控制 条 件 和 不 同 的 转换 方式 .采用 绘图 的 方法 利用 EDA 工具 的 状态 图 标 绘 状态 图 ,然后 
由 EDA 工具 将 状态 变化 图 综合 成 电路 网 表 。 

波形 图 输入 方法 则 是 将 待 设计 的 电路 看 成 是 黑 盒 子 , 只 需 在 EDA 工具 中 配置 该 黑 盒 
子 的 输入 、 输 出 时 序 波形 图 ,EDA 工具 即 可 据 此 完成 黑 盒子 电路 的 设计 。 

原理 图 输入 则 是 在 EDA 工具 的 图 形 界面 上 拖 放 各 类 迪 辑 器 件 和 连 线 组 成 特定 功能 的 
电路 原理 图 。 

图 形 输入 的 方式 是 与 EDA 工具 紧密 关联 的 ,不 同 厂商 之 间 的 图 形 难 以 兼容 和 互联 
互通 。 

2. 综合 

简单 地 讲 , 综 合 (synthesis) 是 将 抽象 的 .分 散 的 实体 结合 成 单个 或 统一 的 实体 。 在 数字 
系统 设计 领域 ,综合 是 将 用 行为 和 功能 层次 表达 的 电路 模型 转换 为 低层 次 的 便于 实现 的 便 
于 装备 .组合 的 模块 的 过 程 。 

设计 过 程 通常 从 高 层次 .抽象 的 行为 描述 开始 ,而 以 最 底层 的 电路 结构 描述 为 结束 ,每 
一 个 层次 的 等 效 转换 都 可 看 作 是 一 次 综合 : 

(1) 从 自然 语言 .图 形 或 高 级 语言 转换 到 硬件 描述 语言 ,是 自然 语言 的 综合 过 程 ; 

(2) 从 算法 描述 转换 到 寄存 器 传输 级 (RTL) 描 述 , 及 从 行为 域 到 结构 域 的 综合 ,是 行为 
综合 ; 

(3) 从 RTL 级 描述 转换 到 由 辑 门 (触发 器 等 ) 的 表述 , 即 巡 辑 综合 ; 

(4) 从 敢 辑 门 级 描述 到 版 图 或 者 转换 到 配置 网 表 的 描述 . 即 结构 综 合 。 

综合 过 程 是 将 软件 化 的 电路 模型 转换 为 硬件 电路 的 关键 步骤 ,是 从 描述 到 电路 的 桥梁 。 
整个 综合 过 程 就 是 将 设计 在 EDA 平台 上 编辑 输入 的 HDL 文本 、 原 理 图 或 状态 图 描述 , 根 
据 特定 的 平台 、 硬 件 结构 组 合 和 约束 条 件 经 编译 、 优 化 .转换 和 综合 最 终 获 得 门 级 电路 甚至 
更 低层 次 的 物理 电路 描述 网 表 文 件 。 


3. 功能 仿真 

直接 对 HDL 或 原理 图 描述 的 逻辑 功能 进行 测试 模拟 ,以 检验 其 实现 的 功能 是 否 满足 
原 有 的 设计 要 求 。 该 仿真 过 程 不 涉及 任何 具体 器 件 的 硬件 特性 。 不 经 历 布局 布线 ,在 设计 
项 目 编译 完成 后 即 可 进行 功能 仿真 测试 。 该 仿真 的 优点 在 于 设计 耗 时 短 . 且 对 硬件 库 和 综 
合 器 没有 要 求 。 
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4. 布局 布线 

布局 布线 又 称 结构 综合 器 ,其 功能 是 将 由 综合 器 产生 的 网 表 文 件 配置 于 指定 的 目标 器 
件 中 ,使 之 产生 最 终 的 下 载 文 件 。 通 常 ,EDA 软件 中 的 综合 器 可 由 专业 的 第 三 方 EDA 公司 
提供 ,而 适配器 则 需 由 芯片 厂商 提供 ,因为 适配器 的 适 配 对 象 直接 与 器 件 的 结构 细节 相 
对 应 。 

适配器 就 是 将 综合 后 网 表 文 件 针对 某 一 具体 目标 器 件 进行 逻辑 映射 操作 ,包括 底层 器 
件 配置 .逻辑 分 割 . 优 化 ,布局 布线 等 操作 , 适 配 完 成 后 产生 可 供 进 行 精确 时 序 仿真 的 网 表 文 
件 , 以 及 用 于 编程 下 载 的 二 进 制 文件 。 

5. 时 序 分 析 与 仿真 

时 序 分 析 用 于 分 析 不 同 的 信号 沿 电路 中 不 同 路 径 传播 中 的 时 延 信息 及 其 接口 时 序 , 检 
查 时 序 是 否 满足 需求 。 

时 序 仿真 是 接近 器 件 真实 运行 特性 的 仿真 ,仿真 文件 已 包含 了 器 件 硬 件 特性 参数 ,仿真 
精度 高 。 时 序 仿 真 的 仿真 文件 必须 来 自 针 对 特定 器 件 的 适配器 ,综合 后 所 得 的 网 表 文件 作 
为 FPGA 适配器 的 输入 文件 ,产生 的 仿真 网 表 文 件 中 已 包含 精确 的 硬件 时 延 信息 。 

6. 下 载 与 硬件 测试 

经 过 布局 布线 后 生成 的 下 载 或 配置 文件 ,通过 编程 器 或 编程 电缆 向 指定 的 芯片 下 载 , 以 
便 进 行 硬件 调试 和 验证 。 












最 后 将 载 人 了 设计 的 硬件 系统 进行 统一 的 测试 ,以 便 最 终 验证 设计 项 目 在 目标 系 
统 上 的 实际 工作 情况 ,以 排除 错误 ,改进 设计 。 


10.1.6 可 编程 逻辑 器 件 软件 与 传统 软件 的 不 同 


首先 分 析 可 编程 旭 辑 器 件 与 传统 软件 系统 的 差异 。 通 过 可 编程 浊 辑 器 件 搭建 的 系统 是 以 
电路 为 基础 的 ,而 传统 软件 是 以 通用 型 硬件 平台 为 基础 构建 的 ,两 者 的 主要 差异 见 表 10-1 。 
表 10-1 FPGA 系统 与 传统 软件 系统 的 差异 性 分 析 
































可 编程 逻辑 器 件 传统 软件 系统 
编程 语言 硬件 描述 语言 (VHDL、Verilog、System Verilog 等 ) | 高 级 程序 设计 语言 (CC++ Java、.C# 等) 
开发 方式 自 项 向 下 、 模 块 化 面向 过 程 、 面 向 对 象 等 
代码 执行 方式 | 过 程 体内 并 行 执行 顺序 执行 
硬件 影响 硬件 性 能 影响 大 .与 硬件 耦合 度 高 硬件 影响 相对 小 
执行 结果 存在 随机 性 结果 具有 确定 性 
驱动 激励 信号 .时 序 数据 .操作 .时 间 
应 用 领域 时 序 要 求 高 对 时 序 要 求 不 高 
运行 平台 特定 芯片 ,平台 耦合 度 高 通用 型 运行 平台 
验证 方法 时 序 验 证 、 功 能 验证 .时 序 分 析 等 软件 测试 .代码 检查 .评审 等 
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由 于 可 编程 逻辑 器 件 开发 .设计 和 应 用 与 传统 软件 的 差异 较 大 ,因此 传统 的 软件 测试 方 
法 难以 直接 应 用 于 可 编程 逻辑 器 件 的 测试 。 





10.1.7 全 过 程 域 的 可 编程 逻辑 器 件 测试 框架 


与 软件 系统 的 测试 类 似 ,可 编程 逻辑 器 件 软 件 的 测试 贯穿 于 可 编程 逻辑 器 件 的 整个 开 
发 周期 ,需要 在 开发 全 过 程 的 不 同 阶 段 采取 相应 的 技术 手段 验证 设计 的 正确 性 。 

覆盖 全 过 程 域 的 可 编程 阔 辑 器 件 软 件 的 测试 框架 如 图 10-2 所 示 。 可 编程 逻辑 器 件 测 
试 技 术 包 括 静 态 测试 和 动态 测试 。 其 中 静态 测试 主要 包括 文档 审查 ,编码 规则 检查 代码 走 
查 、 跨 时 钟 域 分 析 、 形 式 化 分 析 、 等 效 性 验证 和 静态 时 序 分 析 ; 而 动态 测试 则 包括 仿真 测试 和 
板 级 验证 ,其 中 仿真 测试 包括 功能 覆盖 测试 .代码 覆 盖 测 试 、 时 序 仿真 测试 和 软 硬 协 同 仿 
真 等 。 
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图 10-2 ”全 过 程 域 的 可 编程 逻辑 测试 框架 


10.2 静态 测试 


可 编程 逻辑 器 件 静态 测试 的 技术 手段 不 需要 设计 和 和 运行 测试 用 例 , 即 可 有 针对 性 地 
检测 出 被 测 设计 在 特定 方面 的 缺陷 .具有 快速 全面 、 高 效 的 特点 ,是 验证 被 测 设计 正确 
性 和 有 效 性 的 重要 手段 。 静 态 测试 的 对 象 可 以 是 开发 过 程 文档 .代码 .网 表 文 件 等 ,充分 
利用 测试 人 员 的 经 验 和 EDA 工具 的 自动 化 分 析 手 段 ,检查 可 能 存在 的 设计 隐患 或 需求 
偏离 情况 。 
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10.2.1 文档 审查 


可 编程 逻辑 器 件 开发 过 程 中 产生 的 技术 文档 ,是 沟通 实际 业务 需求 .设计 和 最 终 实现 的 
桥梁 ,是 开发 团队 协同 工作 的 依据 ,为 可 编程 多 辑 器 件 设计 的 技术 维护 、 升 级 提供 参考 。 进 
行文 档 审 查 前 ,应 根据 被 测 设计 的 特点 和 技术 要 求 制定 文档 检查 单 , 且 文档 检查 单 必须 通过 
技术 评审 才能 作为 审查 依据 。 文 档 审查 主要 关注 以 下 方面 

(1) 审查 文档 齐全 性 ; 

(2) 审查 文档 标识 和 签署 的 完整 性 ; 

(3) 审查 文档 内 容 的 完备 性 ,准确 性 一 致 性 、 可 追踪 性 ; 

(4) 审查 文档 格式 的 规范 性 ; 

(5) 审查 文档 内 容 的 正确 性 。 

表 10-2 一 表 10-5 给 出 了 基本 的 文档 审查 单 示例 。 

表 10-2 软件 需求 规格 说 明文 档 审 查 表 


序号 检查 要 点 不 适用 | 检查 情况 记录 





是 否 完整 清晰 地 描述 了 引用 文件 ,包括 引用 文档 ( 文 
件 ) 的 文档 号 .标题 编写 单位 (或 作者 ) 和 日 期 等 





是 否 确切 给 出 了 所 有 在 本 文档 中 出 现 的 专用 术语 和 


2 | 缩 略 语 定义 

，。 | 是 青 对 可 编程 带 辑 器 作 运 行 环境 ` 开 发 环境 \ 软 件 功 
能 等 进行 说 明 

1 | 是 青 完 监 \ 清 晰 \ 详 细 地 撒 述 了 由 可 编程 如 辑 顺 件 实 


现 的 接口 定义 , 管 脚 定 义 及 时 序 要 求 等 需求 

是 否 给 出 了 可 编程 逻辑 器 件 接口 管 脚 定义 说 明 , 是 否 
5 | 包含 信号 名 称 、 信 号 传输 方向 .信号 数据 宽度 及 信和 号 
描述 





是 否 给 出 了 各 种 接口 信号 关系 、 接 口 信号 的 时 序 特 性 
及 时 序 余 量 要 求 





是 否 描 述 了 接口 数据 元 素 所 需要 的 特性 ,例如 : 数据 
元 素 的 名 称 /标识 符 、 数 据 类 型 .大 小 和 格式 .计量 单 
位 (如 : 米 、 纳 秒 ) .可 能 值 的 范围 或 枚 举 ( 如 : 0 一 99)、 
准确 性 和 和 精度 (有 效 数 字 位 数 )、 来 源 ( 设 置 /发 送 实 
体 ) .接收 者 (使 用 /接收 实体 )、 时 序 、 频 率 、 容 量 以 及 
其 他 约束 条 件 等 





是否 描述 了 可 编程 逻辑 器 件 接口 通信 特性 ,如 周期 / 
非 周 期 传送 .数据 传送 速率 传输 间隔 等 





蚌 否 描述 了 可 编程 逻辑 器 件 接口 协议 特性 .如 协议 的 
优先 级 别 / 层 次 ;合法 性 检查 .错误 控制 和 恢复 过 程 等 





是 否 描述 了 其 他 所 需要 的 特性 .例如 接口 实体 的 物理 
10 | 兼容 性 (尺寸 .公差 .负载 和 接 插件 的 兼容 性 等 )、 电 
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检查 情况 记录 





是 否 完整 .清晰 ,详细 地 描述 了 由 可 编程 逻辑 器 件 实 
现 的 全 部 功能 ,包括 实现 功能 .时 序 要求 、. 算 法 要 求 、 



















1 | 地 址 空间 分 配 . 软 件 可 编程 要 求 .操作 方式 IP 核 复 用 
等 要 求 

| 是 于 措 述 可 编程 逻辑 器件 的 性 能 需求 ,如 工作 时 钟 频 
率 .时 间 精 度 等 需求 

1。 | 是 于 明确 提出 软件 的 安全 性 .可 靠 性 等 其 他 要 求 ,如 








错误 情况 处 理 、 上 电 及 复位 后 接口 信号 状态 等 要 求 





是 瑾 描述 本 文档 中 的 工程 需求 与 "软件 系统 设计 说 
14 | 明 " 和 (或 )* 软 件 研制 任务 书 " 中 的 需求 的 双向 追踪 
关系 



















文档 编制 是 否 规范 、 内 容 完 整 .描述 准确 
(描述 不 符合 项 性 质 与 统计 信息 、 
条 件 .是否 可 以 开展 后 续 工作 等 ) 





- 致 





表 10-3 软件 概要 设计 说 明文 档 审查 表 
序号 检查 要 点 
1 | 是否 概述 了 可 编程 逻辑 器 件 在 





统 中 的 作用 

是 否 描述 了 可 编程 逻辑 器 件 体 系 结构 (概要) 设计; 如 
2 果 设 计 的 全 部 或 部 分 依赖 于 系统 的 状态 或 方式 ,是 否 
进行 了 说 明 








各 不 符合 项 的 处 理 情况 .不 符合 项 影响 、 产 品 是 否 具 备 评审 





不 适用 | 检查 情况 记录 





是 否 描述 了 可 编程 逻辑 器 件 总 体 结构 .说 明了 模块 的 











3” | 划分 .模块 的 功能 、 系 统 数 据 通 路 等 
是 否 描述 了 模块 间 的 动态 关系 , 即 可 编程 逻辑 器 件 运 
| 行 期 间 模块 间 的 相互 作用 情况 ,包括 执行 控制 流程 、 
数据 流 ,状态 转换 图 、 时 序 图 、 并 发 执行 以 及 动态 行 
的 其 他 方面 等 
。 | 是 否 对 接口 进行 了 标识 ,并 通过 接口 图 来 措 述 可 编程 
5 | 馆 辑 器 件 的 相关 接口 
。 | 是 奢 撒 述 了 各 功能 模块 的 用 轿 . 设 计 决 策 、 开 发 状态 / 


类 型 .输入 数据 、 输 出 数据 、 资 源 占用 情况 等 内 容 





7 | 是 否 描述 了 各 功能 模块 采用 的 设计 方法 





对 于 算法 的 设计 ,是 否 描述 了 完成 算法 由 抽象 层次 过 
8 | 渡 到 实现 层次 的 转换 ,是 否 确 定 出 算法 的 输入 、 输 出 
接口 ,是否 描述 算法 的 实现 过 程 





是 否 描 述 了 各 功能 模块 中 采用 的 可 靠 性 、 安 全 性 、 可 
维护 性 、 可 测试 性 和 数据 安全 保密 的 设计 方法 





10 | 是 否 建立 了 软件 设计 与 软件 需求 的 追踪 表 





11 | 文档 编写 是 否 规 范 、 内 容 完 整 .描述 准确 一 臻 














评价 (描述 不 符合 项 性 质 与 统计 丰 
情况 条 件 .是 否 可 以 开展 后 续 








yy 


各 不 符合 项 的 处 理 情况 .不 符合 项 影响 、 产 品 是 否 
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表 10-4 软件 详细 设计 说 明文 档 审查 表 





是 否 概 述 了 可 编程 逻辑 器 件 在 系统 中 的 作用 




















2 | 是否 标识 和 详细 描述 了 模块 中 的 各 个 子 模块 
3 | 是 否 用 控制 流 图 和 数据 流 图 描述 了 子 模块 间 的 关系 
4 | 是 否 描述 了 各 子 模块 的 设计 需求 .质量 需求 和 其 他 约 





束 条 件 











是 否 描 述 了 各 子 模块 的 设计 决策 、 地 址 分 配 .控制 方 
式 .接口 方式 .存储 器 空间 、 接 口 管 脚 信 号 详细 定义 、 
时 序 说 明 .性 能 指标 、 设 计 输 入 方法 、 输 入 数据 、 输 出 
数据 、 内 部 寄存 器 及 寄存 器 使 用 说 明 、 接 口 信号 时 序 
特性 及 时 序 余 量 要 求 、 子 模块 所 用 到 的 逻辑 、 资 源 占 
用 情况 ,测试 要 求 等 内 容 

是 否 描 述 了 各 子 模块 的 可 靠 性 ,安全 性 、 可 测试 性 设 
计 方法 
是 否 说 明了 所 使 用 IP 核 的 提供 厂商 版 本 信息 及 IP 
核 必 性 ,并 描述 其 逻辑 综合 及 布局 布线 要 求 
是 否 描 述 了 描述 版 图 设计 过 程 


















(描述 不 符合 项 性 上 
条 件 .是 否 可 以 开展 后 


影响 ,产品 是 天 








检查 要 点 
是 否 正确 地 给 出 所 有 在 本 文档 中 出 现 的 专用 术语 和 
缩 略 语 的 确切 定义 
是 否 准确 地 描述 了 可 编程 逻辑 器 件 的 主要 功能 ,包括 
功能 详细 说 明 .使 用 方式 .协议 .复位 状态 .内 部 寄存 
器 定义 .错误 情况 处 理 .应 用 限制 等 





不 适用 


检查 情况 记录 





是 否 准 确 地 描述 了 可 编程 逻辑 器 件 的 主要 性 能 指标 
和 特点 ,如 功 耗 估 算 、 时 钟 频率 等 








是否 准确 地 描述 了 可 编程 逻辑 器 件 的 接口 .包括 管 脚 
分 配 、 有 效 电 平等 





是否 准确 地 描述 了 可 编程 逻辑 器 件 软件 编程 要 求 , 包 
括 可 编程 寄存 咒 定 义 、 初 始 化 .地 址 分 配 .操作 方式 等 





是 否 准确 地 描述 了 可 编程 逻辑 器 件 供 电 要 求 . 如 单机 
提供 电流 的 能 力 、 限 流 设 计 约 束 、 供 电 顺 序 . 去 耦 电容 
的 配置 等 








是 否 准 确 地 描述 了 可 编程 逻辑 器 件 未 用 管 脚 和 其 他 
特殊 管 脚 的 处 理 要求 








蚌 否 准确 地 描述 了 可 编程 逻辑 器 件 上 电 复 位 时 间 
要 求 
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序号 检查 要 点 符合 | 不 符合 | 不 适用 | 检查 情况 记录 
是 否 准确 地 描述 了 初始 上 电 或 配置 过 程 中 可 编程 逻 
9 | 辑 器 件 的 管 脚 状 态 及 其 对 单机 产品 中 可 编程 逻辑 器 
件 产品 接口 处 进行 隔离 设计 的 要 求 

是 否 准 确 地 描述 了 可 编程 逻辑 器 件 关 键 时 序 信 号 的 

相互 时 序 关系 及 其 要 求 

11 | 文档 编写 是 否 规 范 、 内 容 完 整 .描述 准确 一 致 
各 不 符合 项 的 处 理 情况 .不 符合 项 影响 、 产 品 是 否 具备 评审 





























) 


10.2.2 代码 审查 


代码 走 查 通常 由 设计 人 员 ,测试 人 员 和 任务 下 达 方 (或 总 体 人 员 ) 一 起 对 设计 代码 进行 
人 工 的 检查 。 设 计 人 员 向 参加 走 查 的 人 员 讲 解 设计 思路 和 实现 方法 , 逐 行 扫描 设计 代码 , 走 
查 人 员 结 合 自身 经 验 .设计 要 求 ,审查 设计 代码 的 逻辑 正确 性 和 合理 性 。 
对 可 编程 逻辑 器 件 设计 代码 进行 审查 前 ,需要 依据 被 测 设计 的 特点 、 应 用 领域 .功能 需 
求 ,工作 环境 等 制定 尽 可 能 全 面 的 代码 审查 单 , 以 保证 代码 审查 的 覆盖 性 、 适 用 性 和 有 效 性 。 
代码 审查 应 覆盖 以 下 内 容 : 
(1) 审查 工程 文件 的 完整 性 .一致 性 
(2) 审查 代码 和 设计 的 一 致 性 ; 
(3) 审查 代码 执行 标准 的 情况 ; 
(4) 审查 代码 迎 辑 表达 的 正确 性 ; 
(5) 审查 代码 结构 的 合理 性 ; 
(6) 审查 代码 的 可 读 性 。 
代码 审查 单 示 例如 表 10-6 所 示 。 
表 10-6 ”代码 审查 单 示例 
号 检查 项 目 
1 | 设计 中 是 否 有 多 个 时 钟 ,时 钟 信 号 的 获取 和 生成 是 否 正 确 
2 | 设计 中 是 否 有 非 全 局 时 钟 驱动 的 触发 器 
3 设计 中 是 否 存 在 跨 时 钟 域 信号 的 处 理 , 处 理 方式 是 否 合理 
4 是 否 存在 异步 设计 ,异步 信号 的 处 理 是 否 正确 
5 工程 中 的 器 件 选 择 是 否 与 目标 器 件 完 全 相符 
6 编程 所 采取 的 语言 是 否 符合 要 求 , 团 队 开发 中 应 考虑 各 个 开发 团队 依据 的 代码 标准 是 否 一 致 
7 | 是 否 存 在 混合 语言 编程 ,兼容 性 和 互 操 作 是 否 满足 要 求 
8 是 否 使 用 EDA 环境 提供 的 IP 核 ,IP 核 的 例 化 配置 是 否 正 确 
9 否 沿 用 或 适 配 了 第 三 方 或 其 他 项 目的 IP 核 , 这 些 IP 核 是 否 经 过 了 充分 的 验证 
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站 


序号 检查 项 目 





10 | 设计 中 是 否 存在 多 余 的 功能 模块 或 语句 





11 | 设计 中 是 否 存在 未 连接 / 例 化 的 内 部 或 外 部 接口 





12 | 编码 中 是 否 存在 不 合理 的 时 序 逻 辑 和 组 合 逻辑 混用 的 情况 





13 | 可 编程 逻辑 器 件 的 芯片 选 型 是 否 合理 ,温度 .电压 工作 范围 是 否 有 足够 的 余 量 





14 | 可 编程 逻辑 器 件 芯 片 的 处 理 速度 和 时 钟 与 外 部 模块 /芯片 是 否 匹 配 











实际 应 用 中 是 否 存 在 抗 辐 照 需求 ,如 有 :, 则 检查 所 选 芯片 是 否 具备 所 求 的 抗 辐 照 特性 , 抗 辐 照 等 
级 是 否 满足 要 求 





16 | 营 片 外 部 端口 约 东 是 否 与 芯片 选 型 一 致 





17 | 被 测 设计 的 片 级 接口 与 外 部 器 件 接口 特性 是 否 一 致 
18 | 时 钟 约束 是 否 全 面 ,时 钟 过 约束 设置 是 否 满足 要 求 





19 | 集成 开发 环境 的 分 析 ,综合 ,布局 ,布线 设置 条 件 是 否 合理 
20 | 集成 开发 环境 提供 的 每 一 个 warning 是 而 













23 | 集成 开发 环境 中 fmax 设置 是 否 大 于 等 于 系统 主 时 钟 (10% 余 量 ) 





24 | 时 序 分 析 报 告 中 是 否 有 失败 路 径 
25 = 种 工 况 下 的 时 序 余 量 能 否 满足 要 求 
26 | 是 否 有 要 求 某 寄 存 器 初始 状态 必须 为 "0" 或 “1" 而 却 未 明确 初始 化 








27 | 是 否 使 用 了 芯片 提供 的 全 局 复位 信号 ,内 部 子 模块 的 复位 信号 传递 是 否 正确 
28 | 复位 信号 是 否 有 效 , 系 统 是 否 对 所 有 信和 号 赋 子 了 明确 的 初始 值 





29 | 是 否 存 在 使 用 了 乘法 器 但 却 未 调用 器 件 本 身 提供 的 专用 乘法 器 
30 | 是 否 有 乘法 器 工作 于 高 速 的 数据 率 











31 | 由 语言 生成 的 模块 中 参数 (parameter) 设 置 是 否 正 确 








32 | 由 语言 编辑 的 模块 是 否 确 认 过 生成 的 RTL 





33 | 是 否 有 亚 稳 态 的 设计 





34 | 是 否 有 注释 与 设计 不 符 





35 | 修改 模块 后 是 否 更 新 了 注释 和 版 本 信息 





36 | 资源 利用 率 是 否 接 近 100% 














38 | 生成 布局 布线 文件 的 编译 选项 是 否 合理 
39 | 生成 可 供 下 载 的 二 进 制 文件 的 选项 设 定 是 否 合理 








40 | 有 关 状 态 机 编码 的 选项 是 否 正确 
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代码 审查 是 一 种 以 人 工 为 主 的 技术 手段 。 代 码 审查 工作 开始 前 应 详细 地 策划 审查 进度 
(通常 精确 到 模块 级 ) ,制定 详细 的 工作 计划 ,建立 代码 审查 小 组 。 代 码 审 查 小 组 通常 应 包 
项 目 技术 领导 、 上 层 系统 的 开发 人 员 、 本 项 目 外 的 经 验 丰富 的 开发 人 员 、 项 目 开发 人 员 。 为 
保证 审查 的 效果 ,需要 建立 相对 独立 和 封闭 的 工作 环境 。 项 目 审查 结束 后 应 当 形 成 正式 的 
代码 审查 报告 ,作为 开发 人 员 进 行 设计 修改 和 改进 的 依据 。 开 发 人 员 应 针对 代码 审查 报告 
中 的 每 一 个 问题 给 出 处 置 意见 ,并 修改 相应 的 设计 或 文档 。 最 后 ,代码 审查 小 组 应 确认 所 有 
问题 均 得 到 了 合理 的 处 置 。 

一 般 地 ,代码 审查 应 尽早 进行 ,以 便 尽早 地 发 现 结构 性 ,全 局 性 的 问题 ,降低 设计 修改 的 
成 本 。 


巷 





10.2.3 编码 规则 检查 


编码 规则 检查 针对 测试 输入 的 设计 源 代码 (VHDL 或 Verilog) ,检查 其 遵循 编码 规则 、 
规范 的 情况 。 编 码 规则 检查 的 内 容 包括 设计 风格 、 可 读 性 、 时 钟 使 用 、 可 综合 性 、 可 测试 性 和 
模块 化 等 方面 的 综合 性 检查 .有 助 于 提高 代码 的 规范 性 ,缩短 其 在 EDA 工具 上 的 时 间 开 
销 , 提 高 后 期 仿真 和 验证 的 效率 、 代 码 的 安全 性 、 可 靠 性 和 可 维护 性 等 。 

所 谓 的 编码 规则 来 自 于 业界 广泛 认可 的 、 规 范 的 FPGA 设计 和 开发 的 规则 集 , 常 用 的 
规则 集 主要 有 Do-254 规则 集 、Starc 规则 集 等 。 

编码 规则 检查 只 能 检查 代码 实现 过 程 中 不 符合 规范 ,不 合理 的 地 方 ,但 无 法 检查 代码 中 
可 能 存在 的 逻辑 错误 或 元 余 。 

目前 编码 规则 检查 的 支持 工具 主要 有 Alint、Leda、SpyGlass ,HDL Designer 等 ,各 类 工 
具 所 支持 的 内 容 略 有 不 同 ,侧重 点 也 有 差异 。 实 际 项 目 中 应 根据 被 测 方 的 要 求 ,合理 地 选择 
和 使 用 的 规则 集 和 检查 工具 。 

进行 编码 规则 检查 时 ,应 根据 被 测 设 计 的 特点 ,选择 相应 的 规则 集 , 并 对 规则 集 进 行 适 
当地 裁剪 ,以 提高 编码 规则 检查 的 针对 性 和 有 效 性 。 

表 10-7 为 利用 SpyGlass 编码 规则 检查 工具 扫描 某 FPGA 项 目 RTL 代码 得 到 的 结果 ， 
该 设计 编码 中 存在 多 处 违反 编码 规则 的 代码 段 。 

表 10-7 某 FPGA 项 目 编码 规则 检查 结果 

序号 | 等 级 文件 行 号 违反 规则 问题 描述 





1 错误 | timer. v 167 | W19 Constant 18'd337990 will be truncated 





Initial Assignment at Declaration for (count) 
警告 | fenpin.v 31 | syNTH 89 lnitial -Assieiment at Declaration for Ceon 
is ignored by synthesis 





Port fpga_input_infl' is not registered 


3 | 警告 | Top.v 101 | RegImputOutporML |[Hierarety。 Topq 
ierarchy: To 





Port 'Bufin' is not registered [Hierarchy : 


4 警告 | filter. v 48 RegInputOutput-ML i 
filter] 

















5 错误 | ram_read.v 48 | UndrivenInTerm-ML |Detected undriven input terminal raddr[6: 0] 
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续 表 

























违反 规则 问题 描述 
6 ram_write.v UndrivenInTerm-ML |Detected undriven input terminal waddr[6: 0] 
The signal/variable mas' (or some of its bits) 
7 误 了 0 Ww 
铺 训 | soily 区 a read in the block is not in the sensitivity 
人 Blocking assignment used inside a FlipFlop， 
inferred sequential block 








10.2.4 跨 时 钟 域 分 析 


随 着 EDA 技术 的 不 断 发 展 进 步 , 可 编程 好 辑 器 件 在 数字 电路 设计 中 的 应 用 越 来 越 广 
泛 , 所 实现 的 功能 越 来 越 复杂 ,设计 的 规模 越 来 越 庞大 。 在 采用 同步 时 序 控制 的 可 编程 逻辑 
器 件 设 计 中 ,所 有 的 触发 器 均 在 同一 个 时 钟 节拍 下 发 生 状 态 翻 转 , 这 类 设计 简单 .高 效 , 且 有 
利于 后 端的 综合 、 优 化 和 布局 布线 ,但 单 时 钟 只 适用 小 规模 、 功 能 简单 的 系统 设计 。 复 杂 的 
大 规模 设计 难以 在 单个 时 钟 域 中 实现 所 有 的 功能 ,并 满足 时 序 要 求 ,因而 不 可 避免 地 引入 多 
个 时 钟 ,各 个 时 钟 在 频率 和 相位 上 存在 差异 ,需要 处 理 复杂 的 跨 时 钟 域 (Clock Domain 
Crossing) 问 题 。 

1， 跨 时 钟 域 问题 的 发 生机 理 

在 可 编程 旭 辑 器 件 设 计 中 , 亚 稳 态 是 当 信号 在 异步 电路 中 或 是 无 关 的 时 钟 域 之 间 传 输 
时 导致 数字 系统 失效 的 一 种 现象 。 由 于 触发 器 在 时 钟 沿 的 驱动 下 进行 数据 的 采集 和 更 新 ， 
如 果 输 入 数据 的 更 新 不 能 满足 建立 时 间 和 保持 时 间 的 要 求 ,触发 器 将 不 能 按照 预期 的 目标 
实现 翻转 。 若 输入 数据 与 采样 时 钟 发 生 * 沿 打 沿 ” 的 情况 , 双 稳 态 电路 就 不 能 在 规定 的 时 间 
内 进入 稳 态 。 一 旦 双 稳 态 电路 出 现 亚 稳 态 , 则 电路 的 输出 便 缺 乏 可 预测 性 ,输出 电压 处 于 非 
法 的 电 平 值 ,电路 输出 稳定 的 时 间 不 可 预知 , 且 存 在 振荡 的 风险 。 

当 信 和 号 从 一 个 时 钟 域 传送 到 另 一 个 时 钟 域 时 .出 现在 新 的 ,不 相关 时 钟 域 的 信号 是 异步 
信和 号。 异步 信和 号 的 输入 可 以 在 当前 时 钟 的 任意 时 刻 发 生 状 态 翻 转 。 如 果 信 号 的 状态 翻转 无 
法 满足 后 端 触发 器 的 建立 -保持 时 间 要 求 时 ,可 能 出 现状 态 竞 争 ,数据 丢失 ,状态 无 效 等 现 
象 ,产生 亚 稳 态 。 

以 D 和 触发 器 为 例 说 明 亚 稳 态 的 产生 原因 。 图 10-3 展示 了 输入 数据 在 相对 时 钟 沿 的 
不 同时 刻 发 生 翻 转 时 ,D 触发 器 的 输出 情况 。 建 立时 间 Ts 是 指 有 效 时 钟 沿 到 来 之 前 , 输 
入 数据 需要 保持 状态 稳定 的 时 间 ,以 保证 采样 时 间 : 保 持 时 间 Tu 是 指 输入 数据 在 有 效 时 
钟 沿 之 后 需要 保持 的 时 间 ,以 保证 输出 数据 的 稳定 。 输 入 数据 a 的 建立 时 间 和 保持 时 间 
都 能 都 满足 ,数据 输出 稳定 有 效 ;输入 数据 5 不 能 满足 保持 时 间 , 输 入 数据 c 不 能 满足 建 
立时 间 , 从 而 导致 D 触发 器 的 输出 呈现 不 稳定 的 状态 或 者 在 高 低 电 平 之 间 振 荡 , 即 进入 

触发 器 是 一 个 双 稳 态 电路 .其 输出 具有 两 个 稳定 态 :“0” 和 “1”。 图 10-4 所 示 为 D 触发 
器 的 双 稳 态 锁 存 电路 多 辑 图 。Q 和 QQ 是 通过 反 相 器 首尾 相 接 构成 反馈 电路 ,正常 情况 下 .QQ 
和 @Q 是 互补 的 ,发生 状态 迁移 时 ,两 者 的 变化 趋势 相反 .其 变化 曲线 如 图 10-5 所 示 。 
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输入 数据 c 6 数据 无 效 ， 建 立时 间 不 满足 














图 10-3 D 触 发 器 亚 稳 态 产生 示意 图 


Q 和 Q 端 电压 的 变化 需要 一 定 的 时 间 , 亚 稳 态 窗口 的 大 小 取决 于 器 件 的 物理 特性 ,其 
大 小 远 小 于 稳 态 的 持续 时 间 , 但 如 果 将 Q 和 Q 的 电压 剖 于 亚 稳 态 点 的 电压 值 上 , 双 稳 反馈 
电路 将 可 能 停留 在 该 状态 。 电 路 的 输出 状态 发 生 迁 移 ( 从 一 个 稳 态 过 渡 到 另 一 稳 态 ) 时 , 需 
要 足够 的 能 量 激励 ,如 果 所 需 的 能 量 激励 不 能 满足 ., 则 有 可 能 出 现 停留 在 亚 稳 态 点 的 状态 ， 
随机 噪声 的 影响 会 导致 状态 迁移 偏离 预期 。 


Clock: 过 


























D 
图 10-4 触发 器 的 逻辑 电路 构造 图 10-5 亚 稳 态 窗口 示意 图 








2. 亚 稳 态 的 影响 

由 跨 时 钟 域 问题 导致 的 亚 稳 态 是 影响 FPGA 可 靠 性 和 可 用 性 的 重要 因素 ,其 对 数字 系 
统 的 影响 具有 如 下 特点 。 

(1) 亚 稳 态 是 双 稳 态 电路 所 固有 的 属性 ,是 不 可 避免 的 ,是 依 概率 发 生 的 。 为 提高 系统 
的 可 靠 性 ,只 能 尽 可 能 地 减少 亚 稳 态 的 发 生 。 

(2) 亚 稳 态 具有 偶发 性 和 温度 敏感 性 很 难 在 测试 和 验证 中 完全 暴露 ,因此 在 设计 阶段 
应 尽力 避免 。 

(3) 亚 稳 态 导致 后 端 逻 辑 发 生 混乱 .对 于 多 扇 出 的 模块 影响 更 严重 。 当 前 设计 模块 处 
于 亚 稳 态 时 ,输出 值 在 时 间 上 具有 不 确定 性 .不 同 扇 出 的 延迟 不 完全 相同 ,因此 后 端 光 辑 得 
到 的 值 存在 差异 ,进而 导致 亚 稳 态 的 影响 存在 次 级 传播 。 错 误 的 逻辑 输出 在 系统 内 扩展 , 进 
而 导致 整个 系统 的 功能 与 预期 存在 较 大 差异 。 


ey 
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3. 跨 时 钟 域 问题 的 检测 

亚 稳 态 问题 难以 通过 仿真 和 静态 时 序 分 析 等 传统 的 验证 手段 进行 检测 ,需要 运用 专门 
的 跨 时 钟 域 分 析 工 具 检 查 设计 中 的 跨 时 钟 域 信号 是 否 进行 了 有 效 地 同步 处 理 ,从 而 分 析 跨 
时 钟 域 信号 传播 的 正确 性 及 芯片 工作 的 可 靠 性 ,降低 电路 失效 的 风险 。 

利用 相关 的 跨 时 钟 域 分 析 工具 时 ,重点 分 析 可 能 存在 跨 时 钟 域 风险 的 设计 缺陷 。 

1) 信号 进行 跨 时 钟 域 传输 时 ,缺少 同步 电路 支持 

当 触 发 器 在 当前 时 钟 信号 的 驱动 下 采集 来 自 其 他 时 钟 域 的 信号 时 ,如 果 恰 好 采集 到 信 
号 的 变化 边缘 而 非 稳 定 状 态 , 则 容易 引发 亚 稳 态 。 如 图 10-6 所 示 , 信 号 A 由 触发 器 Fl 输 
出 ,Fl 的 驱动 时 钟 沿 为 Clk_A 的 上 升 沿 , 触 发 器 F2 的 驱动 时 钟 为 Clk_B 的 上 升 沿 。 如 果 
在 Clk_B 的 上 升 沿 ,A 信号 发 生变 化 ,尚未 达到 稳定 状态 时 ,F2 的 采样 输出 具有 不 确定 性 ， 
从 而 引发 亚 稳 态 ,此 时 信号 B 的 值 可 能 为 逻辑"0”(F2 输出 端 电压 接近 V1) 或 者 旬 辑 “1”(F2 
输出 端 电压 接近 Vh)。 

2) 快 时 钟 域 到 慢 时 钟 域 信号 保持 时 间 不 足 

当 一 个 快 时 钟 域 的 脉冲 信号 发 生 改变 时 ,如 果 改 变 之 后 信号 状态 保持 的 时 间 小 于 目标 
触发 器 的 时 钟 周期 , 则 该 脉冲 信号 有 可 能 无 法 被 慢 时 钟 域 的 触发 器 采集 到 ,进而 导致 设计 
失效 。 

如 图 10-7 所 示 ,Clk_A 的 时 钟 频率 高 于 Clk_B, 当 信号 A 发 生 脉 冲 型 变化 , 且 保 持 时 间 
为 1 个 Clk_A 时 钟 周期 时 ,由 于 Clk_B 相对 于 Clk_A 的 时 钟 相位 关系 不 固定 ,A 的 变化 存 
在 保持 时 间 不 能 满足 F2 采样 的 要 求 , 即 F2 触发 器 在 Clk_B 的 上 升 沿 可 能 无 法 采集 到 信号 
人 A 的 脉冲 ,进而 电路 忽略 信号 A 脉冲 ,可 能 导致 电路 多 辑 功能 偏离 预期 。 


D A B Ee 
Fl F2 F3 
> 





















































D A B 
Fl Clk A Clk B 
> 
ClkA Clk_B 
Clk j ee 
= A 的 变化 时 间 过 短 ， 
! 一 GB 采样 发 生 在 A 一 一 一 Aik B 先 沁 完 成 来 和 






| 的 非 稳定 状态 








图 10-6 ”缺少 同步 电路 的 信号 传输 图 10-7 快 时 钟 域 到 慢 时 钟 域 的 脉冲 信号 传递 失效 


3) 多 比特 信号 相关 性 和 冲突 风险 
多 比特 信号 通常 为 地 址 或 数据 总 线 信 号 不 同 数据 位 之 间 需 要 保持 一 致 性 ,如 果 不 同 数 


第 10 章 FPGA 测试 


据 位 信号 的 传输 路 径 延迟 不 一 致 .后 端 进行 信号 重组 时 ,数据 位 之 间 的 一 致 性 有 可 能 发 生 丢 
失 , 从 而 导致 电路 功能 不 正确 。 

如 图 10-8 所 示 ,X、Y 分 别 为 总 线 的 某 两 位 ,两 路 信号 保持 信号 值 翻转 的 一 致 性 ,由 于 
Xl 和 Y1 经 过 的 电路 延迟 不 同 , 所 有 经 过 一 级 触发 器 同步 后 的 X3、Y3 失去 了 一 致 性 ,进而 
末端 触发 器 在 时 钟 Clk_B 的 驱动 下 采集 X4、Y4 时 ,采集 到 的 信号 已 经 失去 一 致 性 ,从 而 导 
致 信号 重组 后 的 结果 不 正确 。 














庆 XI 一 电 族 
Fl 退 A F2 F3 















































图 10-8 多 比特 信号 重组 时 的 冲突 


4) FIFO 同步 电路 中 空 满 标识 生成 不 正确 

FIFO 机 制 常用 于 进行 跨 时 钟 域 的 数据 传输 .完成 不 同 速 率 的 ,特别 是 存在 突 发 性 的 数 
据 接 口 处 理 。 典 型 的 双 口 RAM 结构 的 FIFO 同步 控制 电路 如 图 10-9 所 示 。 如 设计 中 使 用 
了 FIFO, 则 应 重点 检查 空 . 满 信号 的 生成 是 否 正确 :以 避免 出 现 写 入 一 个 满 FIFO 或 读 取 一 
个 空 FIFO 的 情况 。 同 时 ,为 保证 地 址 字段 各 个 信号 线 之 间 的 数据 一 致 性 :应 采用 格雷 码 等 
安全 编码 以 避免 可 能 出 现 的 地 址 不 稳定 的 状态 。 
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图 10-9 FIFO 同步 机 构 


4. 跨 时 钟 域 分 析 工 具 


目前 应 用 比较 广泛 的 跨 时 钟 域 分 析 工 具 主 要 有 Questa CDC 和 SpyGlass CDC。 这 两 


个 工具 功能 类 似 , 而 SpyGlass CDC 在 复杂 握手 和 FIFO 同步 方面 有 所 侧重 , 且 对 于 大 规模 
设计 的 检测 效率 更 高 。 

跨 时 钟 域 分 析 工 具 SpyGlass CDC 能 够 自动 地 对 FPGA 设计 进行 模块 级 和 芯片 级 的 扫 
描 , 分 析 时 钟 信 号 的 敏感 沿 . 检 查 可 能 触发 亚 稳 态 的 跨 时 钟 域 问 题 。 该 工具 能 够 直接 扫描 混 
合 语言 编写 的 HDL 设计 文件 集 , 自 动 分 析 时 钟 传播 树 ,检查 复杂 握手 信号 和 FIFO 同步 设 
计 是 否 满足 设计 方法 学 的 要 求 。 将 检测 结果 按照 违规 严重 等 级 分 别 以 信息 、 和 警告 或 错误 显 
示 , 并 以 图 形 化 界面 显示 出 现 问题 的 时 钟 信号 传播 路 径 , 并 给 出 建议 性 的 修正 策略 。 

表 10-8 为 利用 SpyGlass CDC 对 某 大 型 FPGA 设计 进行 跨 时 钟 域 分 析 后 所 得 的 结果 ， 
该 设计 中 有 多 个 存在 跨 时 钟 域 风险 的 设计 模块 。 


序号 





错误 等 级 


错误 


错误 


错误 





表 10-8 某 FPGA 项 目 跨 时 钟 域 分 析 结 果 


文件 违反 规则 问题 分 析 


zero_d 的 置 位 是 由 时 钟 GC10M 驱动 的 ， 
而 operation_8620 的 输入 端 plo 来 自 组 
Oper.v Ac_unsync01 合 逻 辑 pla&plb, 该 组 合 逻辑 中 pla 和 
plb 分 别 由 不 同 的 时 钟 驱动 ,未 进行 有 效 
的 时 序 同步 操作 ,存在 亚 稳 态 风险 


ageb 是 属于 DCM_60MHz. clkfx_out 时 
钟 域 的 ,而 compal 的 b 输 入 端 diff 是 在 
GC10M 输 出 的 ,两 者 未 进行 有 效 的 同步 
操作 ,存在 亚 稳 态 风险 


comp.v Ac_unsync01 


thresh 的 输出 是 由 时 钟 DCM_60MHz 
驱动 的 ,而 thresh 信号 的 更 新 输入 low_ 
add 是 由 Threshold 经 过 组 合 逻 辑 处 理 
得 到 的 ,Threshold 源 于 threshold_rf, 该 
信号 由 时 钟 GC10M 驱动 ,两 者 未 进行 
有 效 的 同步 操作 处 理 


inf.y Ac_unsync02 
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续 表 


序号 | 错误 等 级 文件 问题 分 析 





pulse_cnt 是 由 时 钟 CLKDV_BUF 驱动 
的 ,而 pulse_cn 的 计数 控制 端 是 由 reset 
4 警告 | ram_read.v Ac_unsync02 _n&-pulse 的 组 合 逻辑 得 出 的 ,reset_n 是 
由 时 钟 GC10M 驱动 的 ,两 者 未 进行 有 
效 的 同步 操作 

dac_0 模块 中 对 p2s_e 的 操作 使 用 采用 
5 警告 | ctrl.v 1272 | Clock_converge01 | 时 钟 的 下 降 沿 ,而 其 他 部 分 对 p2s_state 
的 使 用 均 采 用 上 升 沿 





CLKDV_BUF' 时 钟 域 的 信号 sign 由 
GC10M 时 钟 域 生成 的 复位 信号 reset_n 
_fifo 执行 复位 操作 ,而 后 者 未 进行 同步 
操作 


6 警告 clock_trans.v Reset_sync02 











10.2.5 等 效 性 验证 


1. 等 效 性 验证 的 目的 

如 前 所 述 ,通常 的 可 编程 逻辑 设计 流程 中 ,开发 过 程 中 ,从 硬件 描述 语言 到 可 供 下 载 的 
芯片 需要 经 过 综合 ,映射 ,布局 布线 等 多 个 阶段 ,并 呈现 出 不 同 的 体现 形式 。 开 发 人 员 直 接 
面向 硬件 描述 语言 .图 形 或 虚拟 元 器 件 组 成 的 代码 或 设计 图 。 而 进行 信号 处 理 的 实体 是 固 
化 在 可 编程 多 辑 芯片 中 的 数字 化 电路 ,而 中 间 需 要 生成 综合 后 网 表 、 时 序 仿真 网 表 、 布 局 布 
线 后 网 表 等 形式 。 

如 何 保证 整个 开发 流程 中 所 呈现 的 不 同 实体 之 间 是 等 效 的 ? 如 何 确认 各 个 实体 均 没有 
偏离 用 户 的 原始 意图 ? 为 此 ,可 以 采取 两 种 策略 。 

第 一 种 策略 是 利用 仿真 手段 ,在 开发 中 的 每 一 个 阶段 ,针对 每 一 个 层次 的 实体 执行 同一 
类 的 仿真 测试 ,如 果 两 个 实体 在 所 有 仿真 中 的 运行 结果 均一 致 , 则 说 明 两 个 实体 是 等 效 的 。 
这 种 方法 需要 的 仿真 时 间 和 计算 资源 开销 极 大 .仿真 手段 相对 比较 低 效 。 

第 二 种 策略 是 基于 形式 化 方法 的 边 辑 等 效 性 验证 ,形式 化 方法 是 采用 理论 证 明 的 手段 
证 明 各 个 不 同 阶段 或 层次 的 实体 在 多 辑 上 是 等 效 的 。 这 种 方法 能 够 保证 验证 的 充分 性 和 完 
备 性 ,效率 远 高 于 基于 仿真 的 验证 手段 。 

利用 等 效 性 验证 和 静态 时 序 分 析 相 结合 的 方式 取代 部 分 时 序 仿真 .确认 布局 布线 后 的 
风 辑 实体 与 经 过 功能 仿真 验证 的 逻辑 是 否 等 价 , 无 需 测试 向 量 即 可 快速 、 全 面 地 完成 时 序 验 
证 工作 ,以 提高 测试 的 效率 。 


2. 逻辑 等 效 性 验证 的 作用 

按照 多 辑 等 效 性 验证 的 待 验证 实体 的 不 同 , 可 以 划分 为 3 种 验证 形式 。 

1) RTL 到 RTL 的 等 效 性 验证 

RTL 级 的 逻辑 等 效 性 验证 主要 有 两 种 使 用 方法 。 

(1) RTL 代码 设计 修改 后 的 回归 测试 。 如 果 设 计 人 员 对 RTL 代码 进行 了 修改 和 优 
化 ,为 了 保证 所 进行 的 RTL 更 动 不 影响 原 有 设计 的 相关 功能 .可 以 进行 RTL 级 的 等 效 性 
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验证 手段 ,而 不 需要 运行 相应 的 仿真 测试 ,提高 回归 测试 的 效率 。 

(2) 设计 语言 迁移 有 效 性 的 验证 。 由 于 实际 工程 的 需要 ,往往 会 对 相同 的 设计 模型 (或 
IP 核 ) 采 取 不 同 的 硬件 描述 语言 (VHDL、Verilog HDL、System C 等 ) 进 行 实现 ,验证 同一 
模型 的 不 同 实现 版 本 的 一 致 性 需要 采取 逻辑 等 效 性 验证 手段 。 

2) RTL 到 门 级 的 等 效 性 验证 

这 种 验证 手段 用 于 比较 RTL 级 设计 和 门 级 网 表 的 一 致 性 。 主 要 有 以 下 两 种 使 用 
方法 。 

(1) 双重 设计 的 等 效 性 验证 。 当 设计 团队 采取 两 种 形式 对 设计 进行 了 描述 ,其 中 RTL 
级 的 描述 用 系统 仿真 和 模拟 , 门 级 描述 用 于 流 片 。 利 用 RTL 到 门 级 的 等 效 性 验证 确保 两 
个 独立 设计 在 功能 上 的 一 致 性 ,从 而 保证 最 终 实现 未 偏离 预期 。 

(2) 综合 后 的 回归 测试 。RTL 级 的 代码 具有 平台 无 关 性 ,不 同 的 EDA 综合 工具 的 处 
理 基本 一 致 ,但 会 存在 差异 性 。 为 了 验证 经 过 不 同 EDA 综合 工具 处 理 后 生成 的 网 表 在 收 
辑 上 与 原 有 的 RTL 设计 一 致 ,确保 不 同 的 综合 工具 未 造成 不 期 望 的 逻辑 更 动 , 则 可 以 使 用 
RTL 到 门 级 的 等 效 性 验证 手段 ,而 无 需 采 用 运行 大 量 的 仿真 测试 。 

3) 门 级 到 门 级 的 等 效 性 验证 

门 级 到 门 级 的 等 效 性 验证 主要 用 于 难以 在 门 级 (时 序 ) 运 行 所 有 仿真 测试 的 大 型 设计 的 
验证 中 ,主要 用 于 以 下 4 个 方面 。 

(1) 综合 后 的 时 序 和 功 耗 改进 。 对 于 大 规模 的 复杂 设计 ,综合 工具 常常 不 能 够 迅速 、 有 
效 地 满足 所 设 定 的 时 序 和 功 耗 约束 ,此 时 需要 设计 者 对 各 种 综合 选项 .参数 进行 调整 或 者 直 
接 对 综合 后 的 网 表 进 行 手动 修改 ,而 要 验证 这 些 调 整 和 修改 未 影响 所 要 实现 的 功能 则 需要 
进行 门 级 到 门 级 的 等 效 性 验证 。 

(2) 布局 布线 后 验证 。 综 合 后 的 网 表 需 要 经 过 布局 布线 工具 的 处 理 后 才能 满足 各 种 时 
序 约束 并 降低 路 由 /布线 拥塞 ,为 了 验证 布局 布线 后 的 网 表 文 件 未 影响 原 有 的 功能 ,对 于 小 
型 设计 可 以 采用 时 序 仿真 的 方法 运行 所 有 的 功能 仿真 测试 以 确保 功能 复合 要 求 ,而 对 于 复 
杂 的 大 规模 设计 ,时 序 仿真 几乎 无 法 做 到 全 覆盖 ,因此 需要 只 需 验 证 综合 后 网 表 与 布局 布线 
后 的 网 表 的 等 效 性 即 可 。 

(3) 测试 逻辑 插入 后 验证 。 如 果 在 原始 的 门 级 设计 中 插入 一 个 测试 逻辑 ,采取 等 效 性 
验证 方法 验证 插 和 人 测试 逻辑 后 的 设计 在 功能 上 与 原 有 设计 在 系统 层面 上 一 致 的 , 则 说 明 该 
测试 光 辑 未 影响 原 有 设计 是 可 用 的 。 

(4) 回归 测试 。 采 用 等 效 性 验证 方法 验证 不 同 版 本 的 门 级 设计 版 本 在 功能 上 与 参考 设 
计 版 本 的 一 致 性 ,从 缩短 不 同 版 本 迭代 过 程 中 回归 测试 的 工作 量 ,提高 回归 测试 的 效率 。 


3. 等 效 性 验证 的 工具 支持 

常用 的 等 效 性 检查 工具 为 Formalpro 和 Formality。 这 两 个 工具 采用 形式 验证 技术 判 
断 一 个 设计 的 两 个 版 本 在 功能 上 是 否 等 效 。 这 两 个 工具 提供 流程 化 的 图 形 界面 和 调试 功 
能 ,检测 设计 中 的 错误 并 将 其 隔离 。 功 能 测试 通过 后 ,测试 人 员 可 以 利用 该 工具 ,直接 将 综 
合 后 的 门 级 网 表 或 布局 布线 后 带 延 时 信息 的 网 表 与 功能 仿真 后 的 代码 进行 等 效 性 验证 , 确 
保 其 未 偏离 原始 的 设计 意图 。 


4. 等 效 性 验证 的 基本 流程 
可 编程 逻辑 器 件 等 效 性 验证 的 基本 流程 如 图 10-10。 在 输入 设计 中 A 一 般 作为 参考 设 
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计 , 而 B 作 为 待 验证 的 设计 。 输 入 文件 用 于 设 定 各 类 参数 ,包括 黑 盒子 生命 .约束 、 匹 配 规 
则 等 。 库 文件 是 和 EDA 平台 及 工具 相关 的 、 综 合 、 编 译 和 布局 布线 需要 的 各 类 文件 。 在 编 
译 阶段 ,等 效 性 验证 工具 将 输入 设计 转化 成 内 部 的 数据 结构 并 确定 各 类 参考 比较 点 ,匹配 阶 
段 则 建立 参考 设计 与 待 验证 设计 各 类 寄存 器 .端口 和 连 线 的 对 应 关系 ,分 析 阶 段 则 综合 各 类 
匹配 信息 ,评估 A、B 之 间 是 否 等 价 , 如 不 等 价 则 分 析 并 定位 不 等 价 的 比较 点 。 最 后 生成 各 
类 报告 文件 和 检查 结果 。 








图 10-10 ”等 效 性 验证 基本 流程 


利用 Formalpro 工具 对 某 小 型 FPGA 设计 进行 了 光 辑 等 效 性 验证 的 结果 ,比较 的 两 端 
分 别 为 RTL 设计 代码 和 布局 布线 后 的 网 表 文 件 。Formalpro 工具 的 分 析 报 告 如 下 : 
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Number of Removed comparison points: 0 


Fedby a multiply driven net 0 
Fed by a combinational cycle 0 
Fedby a floating net 0 
Fed by an unmatched net 0 


Number of Unsolved comparison points: 0 


经 过 对 RTL 设计 和 综合 后 网 表 的 仔细 比 对 ,发 现存 在 两 个 不 等 价 点 是 由 于 布局 布线 
后 产生 了 两 个 多 余 的 反 相 器 导致 的 。 


5. 等 效 性 验证 的 关注 点 

在 执行 两 个 设计 实体 的 等 效 性 验证 时 , 主要 的 步骤 是 进行 参考 点 匹配 ,并 对 存在 的 不 等 
价 点 进行 分 析 , 确 定 其 影响 域 。 对 于 大 型 的 设计 往往 需要 手动 编写 匹配 规则 ,并 采取 调试 手 
段 分 析 未 匹配 的 逻辑 节点 和 设计 模块 。 在 此 过 程 中 ,应 重点 关注 以 下 方面 。 

(1) 寄存 器 的 赋值 与 合并 。 综 合 器 或 者 布局 布线 器 为 了 满足 特定 的 约束 要 求 ,需要 对 
各 个 设计 节点 的 扇 人 、\ 扇 出 度 进行 调整 ,从 而 导致 寄存 器 的 复制 或 者 合并 。 这 种 不 匹配 通常 
存在 于 不 同 层次 的 设计 实体 的 配置 中 ,如 RTL 到 门 级 或 者 布局 布线 后 验证 中 。 

(2) 状态 机 编码 。 常 用 的 状态 机 编码 主要 有 二 进 制 编码 .One-Hot 编码 和 格雷 码 。 设 
计 者 采用 HDL 语言 编写 状态 机 之 后 .在 综合 或 布局 布线 阶段 ,EDA 工具 会 根据 用 户 配置 
采取 相应 的 状态 机 编码 。 此 时 .各 个 状态 值 的 编码 方式 有 可 能 与 设计 者 最 初 设计 的 编码 不 
一 致 。 因 此 ,在 进行 等 效 性 验证 时 应 注意 检查 综合 或 布局 布线 后 的 状态 机 编码 是 否 合理 , 状 
态 机 相关 的 各 个 寄存 器 的 对 应 关系 是 否 正确 ,是 否 满足 要 求 。 

(3) 状态 机 的 转换 。 设 计 者 以 编程 手段 描述 状态 机 时 ,依据 的 是 利用 实际 需求 构造 的 
有 限 状态 机 的 状态 转移 图 。 如 果 状 态 转 移 图 比较 复杂 , 则 该 状态 机 本 身 具 有 一 定 的 优化 空 
间 ,在 综合 阶段 EDA 工具 将 按照 既定 的 规则 进行 状态 裁剪 、 合 并 ,从 而 使 得 处 理 后 的 状态 
机 与 原 有 状态 机 不 一 致 。 因 此 .包含 复杂 状态 机 的 设计 进行 等 效 性 验证 时 .需要 格外 关注 状 
态 机 的 优化 是 否 正 确 、 合 理 。 另 一 方面 .进行 安全 状态 机 的 设计 .例如 设计 包含 三 模 宛 余 的 
抗 干扰 状态 机 设计 时 ,如 果 不 同 模式 的 状态 机 设计 不 完备 .不 正确 ,在 综合 阶段 ,EDA 工具 
有 可 能 将 等 价 的 状态 机 合并 ,从 而 导致 三 模 宛 余 设计 失效 。 对 于 复杂 状态 机 三 模 元 余 失效 
的 情况 ,往往 需要 运行 大 量 门 级 仿真 或 时 序 仿真 才能 发 现 .而 采用 等 效 性 验证 方法 则 可 以 较 
为 便捷 地 发 现 此 缺陷 。 

(4) 锁 存 器 的 异常 引入 。 在 利用 硬件 描述 语言 进行 模型 描述 时 ,编码 中 有 可 能 发 生 计 
else 分 支 不 完备 ,switch case 语句 未 设计 default 分 支 . 子 模块 使 能 端 置 位 不 正确 (存在 常 有 
效 / 无 效 使 能 模块 ) . 子 模块 端口 链接 不 全 等 失误 ,从 而 导致 综合 后 锁 存 器 的 引入 ,可 能 导致 
不 匹配 点 的 出 现 。 进 行 等 效 性 验证 时 应 检查 各 个 锁 存 器 的 出 现 是 否 符合 设计 意图 ,以 便 修 
正 设计 错误 。 
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10.2.6 静态 时 序 分 析 


1. 目的 

静态 时 序 分 析 (static timing analysis) 用 于 分 析 综 合 或 布局 布线 后 的 网 表 是 否 满足 时 序 
要 求 。 时 序 特性 是 否 符合 要 求 是 FPGA 设计 的 重要 验证 内 容 。 时 序 特性 可 以 通过 动态 时 
序 仿真 进行 测试 ,但 该 方式 具有 仿真 速度 慢 ,无 法 验证 到 所 有 传播 路 径 等 缺点 。 而 静态 时 序 
分 析 方 法 则 能 够 提取 电路 的 所 有 时 序 路 径 , 具 有 不 依赖 于 激励 .可 穷尽 所 有 路 径 、 运 行 速 度 
快 等 优点 ,非常 适合 大 规模 多 辑 设计 的 验证 ,是 FPGA 静态 测试 中 不 可 或 缺 的 测试 手段 。 


2. 作用 与 要 求 

静态 时 序 分 析 无 需 用 向 量 去 激活 某 个 路 径 , 对 所 有 的 时 序 路 径 进 行 错误 分 析 , 能 处 理 百 
万 门 级 的 设计 ,分 析 速 度 比 时 序 仿 真 快 几 个 数量 级 。 在 同步 逻辑 情况 下 ,可 以 达到 100% 的 
时 序 路 径 履 盖 。 静 态 时 序 分 析 的 目的 是 找 出 隐藏 的 时 序 问题 ,根据 时 序 分 析 结 果 优 化 迪 辑 
或 约束 条 件 ,使 设计 达到 时 序 闭合 (收敛 ) 。 静 态 时 序 分 析 可 以 识别 的 时 序 故 障 数 要 比 仿真 
多 得 多 ,包括 建立 /保持 时 间 和 恢复 / 移 除 检查 .时钟 脉 冲 宽度 .不 受 约束 的 逻辑 通道 。 

静态 时 序 分 析 主 要 包含 如 下 内 容 : 

(1) 验证 被 测 设计 的 所 有 路 径 的 时 序 需 求 能 够 满足 ; 

(2) 分 析 被 测 设计 的 所 有 约束 路 径 的 建立 时 间 和 保持 时 间 在 当前 的 工作 时 钟 下 能 够 
满足 ; 

(3) 分 析 被 测 设计 的 工作 频率 是 否 满足 性 能 要 求 ; 

(4) 分 析 并 检查 是 否 存在 未 约束 路 径 中 存在 可 能 导致 系统 性 能 瓶颈 的 关键 时 序 路 径 ， 

(5) 分 析 时 钟 质量 .检查 时 钟 的 拌 动 、 偏 移 、 占 空 比 失真 等 特性 对 于 目标 设计 的 影响 
程度 ; 

(6) 确定 分 配 引 脚 的 特性 ,在 静态 时 序 分 析 中 ,可 以 通过 约束 可 编程 逻辑 器 件 的 片 级 
1/O 引 脚 所 支持 的 接口 标准 、 接 口 速率 及 其 他 电气 特性 ,然后 分 析 各 种 接口 特性 对 于 时 序 特 
征 的 影响 程度 。 

静态 时 序 分 析 至 少 需要 覆盖 3 种 工 况 下 的 时 序 特性 ,包括 最 大 工 况 (温度 最 高 ,电压 最 
低 ) .最 小 工 况 (温度 最 低 ,电压 最 高 ) 和 典型 工 况 ( 典 型 温度 和 典型 电压 )。 电 压 和 温度 是 作 
为 约束 条 件 作 用 于 静态 时 序 分 析 过 程 的 。 一 般 地 ,温度 和 电压 的 变化 范围 以 相应 芯片 手册 
中 的 标 称 规格 为 准 , 也 可 以 根据 实际 芯片 的 工作 环境 适应 范围 确定 。 


3。 原 理 
以 2 级 触发 器 级 联 的 简单 电路 为 例 说 明 静 态 时 序 分 析 (static timing analysis) 的 原理 。 
图 10-11 为 一 个 两 级 触发 器 电路 。 
为 保证 分 析 结 果 的 可 靠 性 :所 有 的 分 析 都 是 在 最 恶劣 的 情况 下 进行 。 针 对 每 个 触发 器 ， 
都 应 满足 如 下 时 序 方程 : 
tsu ZT. 一 (tpRop MAX 十 tco_MAx ) 十 tskEw (10-1) 
thp < tproP MIN 十 tco mn 一 tskEw (10-2) 


式 中 ， 
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图 10-11 两 级 触发 器 电路 


tsu: 触发 器 要 求 的 建立 时 间 ; 

tp : 触发 器 要 求 的 保持 时 间 ; 

T.: 系统 驱动 时 钟 周期 ; 

tprop MAx : 传输 过 程 最 大 延迟 (包括 组 合 电路 延迟 和 走 线 延 迟 ); 

tpRgoP MIN : 传输 过 程 最 小 延迟 (包括 组 合 电路 延迟 和 走 线 延迟 ); 

tcomax: 触发 器 最 大 传播 延迟 , 即 从 时 钟 触 发 器 沿 开始 到 数据 稳定 的 出 现在 输出 端的 
最 大 延迟 ; 

tcomm: 触发 器 最 小 传播 延迟 , 即 从 时 钟 触 发 器 沿 开始 到 数据 稳定 的 出 现在 输出 端的 最 
小 延迟 ; 

tskgw : 时 钟 偏 斜 ,此 处 tskew 二 ts 一 ,to 和 分 别 表示 时 钟 沿 到 达 两 个 触发 器 的 时 间 。 

对 于 公式 (10-1) ,首先 ,假定 时 钟 iskew 二 0, 当 前 时 钟 触发 沿 结束 后 ,第 一 级 触发 器 的 D 
端 数据 最 长 需 经 过 tpror max 十 tco_max 才 能 到 达 第 二 级 触发 器 的 了 D 端 ,然后 等 待 xsu ,才能 允许 
下 一 个 时 钟 沿 的 到 来 。 所 以 tpgop max 十 tco -max 十 tsu 是 这 条 路 径 上 的 最 小 时 钟 周期 ,从 而 限 
制 该 路 径 上 的 最 快 时 钟 速度 。 

对 于 公式 (10-2) ,当前 时 钟 触发 沿 结束 后 ,第 一 级 触发 器 的 D 端 数据 最 短 需 要 经 过 
tpgop_MN 十 tco_wN 时 间 到 达 第 二 级 触发 器 的 D 端 ,这 也 是 第 二 级 触发 器 D 端 昌 数据 能 够 保持 
稳定 的 时 间 ,所 以 要 求 tpgop mn 十 tco wmN 二 tp 。 

由 于 tkco 和 触发 器 之 间 的 组 合 多 辑 延 迟 ,第 一 级 触发 器 的 输出 信和 号 不 会 马上 反映 到 第 二 
级 触发 器 的 输入 端 , 组 合 逻 辑 的 延 时 越 大 , 则 tsksw 的 值 越 大 ,整个 系统 的 建立 时 间 余 量 逐 渐 
变 大 ,但 保持 时 间 余 量 逐 渐 减 小 。 若 传播 延迟 过 大 ,导致 违背 触发 器 的 建立 保持 时 间 指 标 ， 
触发 器 就 可 能 出 现 亚 稳 态 的 现象 。 而 在 异步 传输 中 ,由 于 两 个 时 钟 之 间 不 存在 相关 性 ,第 一 
个 触发 器 的 输出 可 能 在 后 端 触 发 器 时 钟 沿 的 任何 位 置 出 现 , 需 采 取 同 步 措施 ,以 保证 系统 工 
作 的 稳定 。 

静态 时 序 分 析 工 具 : 依 据 设计 人 员 设 定 的 时 钟 和 管 脚 约束 ,根据 布线 结果 计算 各 个 时 序 
路 径 上 的 延迟 信息 .分 析 时 钟 树 的 传播 ,并 计算 各 个 模块 所 需要 的 建立 保持 时 间 能 否 满足 。 


4. 方法 

静态 时 序 分 析 是 基于 时 序 路 径 的 . 它 将 设计 逐 层 分 解 成 4 种 主要 的 时 序 路 径 ,如 
图 10-12 所 示 。 每 条 时 序 路 径 包含 1 个 起 点 和 1 个 终点 ,时 序 路 径 的 起 点 只 能 是 设计 的 基 
本 输入 端口 或 者 内 部 寄存 器 的 时 钟 输入 端 :终点 则 只 能 是 内 部 寄存 器 的 数据 输入 端 或 设计 
的 基本 输出 端口 。 
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路 径 2) 一 ~、、 路 径 G)-~~~、、 


TS 
er ST 












































路径 (4) -一 
图 10-12 静态 时 序 分 析 的 基本 路 径 


静态 时 序 分 析 主 要 包含 4 类 基本 时 序 电 路 : 

(1) 从 输入 端口 到 触发 器 的 数据 DD 端 ; 

(2) 从 触发 器 的 时 钟 CLK 端 到 触发 器 的 D 端 ; 

(3) 从 触发 器 的 时 钟 CLK 端 到 输出 端口 ; 

(4) 从 输入 端口 到 输出 端口 。 

通过 计算 各 个 时 序 路 径 上 数据 信号 的 到 达 时 间 和 要 求 时 间 的 差 值 ,按照 式 (10-1) 和 
式 (10-2) 计 算 各 个 时 钟 节点 的 建立 时 间 和 保持 时 间 , 以 判定 是 否 存 在 时 序 违规 或 者 错误 。 
数据 到 达 的 时 间 Ts 是 指数 据 从 起 点 到 终点 经 过 的 所 有 器 件 和 连 线 延迟 时 间 之 和 。 数 据 要 
求 时 间 Tw 是 指 根据 约束 条 件 计 算出 的 从 起 点 到 达 终 点 的 理论 时 间 , 默 认 的 参考 值 是 1 个 
时 钟 周期 。 如 果 数 据 能 够 在 要 求 的 时 间 内 到 达 终 点 , 则 该 路 径 是 符合 设计 规则 的 。 

时 间 裕 量 Slack 的 计算 公式 为 

Slack = Tm — Tw (10-3) 

分 析 过 程 中 ,需要 利用 工具 穷尽 计算 所 有 路 径 上 的 Slack, 值 为 正则 代表 符合 要 求 , 值 为 
负 则 表示 不 满足 。Slack 值 为 负 的 路 径 是 影响 这 个 设计 时 序 指标 和 性 能 的 关键 路 径 , 需 要 
进一步 优化 和 改进 。 


5. 工具 支持 

目前 ,业界 主流 的 静态 时 序 分 析 工 具 主 要 分 成 两 类 。 

(1) 可 编程 逻辑 器 件 开 发 IDE 标 配 的 工具 。 不 同 的 芯片 提供 商 分 别提 供 适 合 自家 芯片 
平台 的 静态 时 序 分 析 工 具 . 这 类 工具 通常 与 开发 IDE 集成 在 一 起 ,如 Xilinx 公司 的 ISE 开 
发 环境 包含 的 静态 时 序 分 析 工 具 Timing Analyzer、Altera 公司 的 Quartus 了 [开发 环境 包含 
的 TimeQuest Timing Analyzer 以 及 Actel 公司 的 Libero 开发 环境 包含 的 SmartTime 等 。 

(2) 通用 型 的 静态 时 序 分 析 工 具 如 PrimeTime、TimeCraft 等 。 该 这 类 工具 只 能 够 适用 
于 多 种 开发 平台 的 设计 产品 ,需要 开发 方 提供 分 析 所 需要 的 标准 延 时 文件 SDF 以 及 与 芯片 
相关 的 各 类 库 文件 。 

下 面 为 利用 PrimeTime 工具 对 某 个 FPGA 设计 的 TS_C10M 时 钟 的 传播 路 径 进行 静 
态 时 序 分 析 的 结果 。 工 具 给 出 了 各 个 时 钟 节点 的 Slack 值 ,以 及 各 个 路 径 的 延迟 信息 , 据 此 
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可 以 计算 路 径 的 时 序 余 量 。 如 果 Slack 值 为 负 则 时 序 不 满足 ,认定 为 时 序 违规 ,需要 进一步 
处 理 。 
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10.3 仿真 测试 


按照 测试 对 象 所 对 应 的 实体 不 同 ,可 以 将 仿真 测试 分 为 功能 仿真 . 门 级 仿真 及 时 序 仿 
真 .其 中 功能 仿真 的 测试 对 象 是 采用 RTL 代码 描述 的 模型 或 者 采用 EDA 图 形 化 工具 构造 
的 组 件 ; 门 级 仿真 的 测试 对 象 是 经 过 综合 /编译 后 生成 的 网 表 文 件 ; 时 序 仿真 的 测试 对 象 是 
布局 布线 后 生成 的 网 表 文 件 和 标准 延 时 文件 。 

按照 可 编程 逻辑 器 件 的 开发 流程 ,在 测试 阶段 ,应 依次 实施 功能 仿真 、 门 级 仿真 和 时 序 
仿真 ,以 保证 测试 的 充分 性 和 完整 性 。 
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10.3.1 仿真 测试 的 特点 


对 设计 的 功能 和 性 能 进行 验证 时 ,通常 有 板 级 验证 和 仿真 测试 两 种 途径 可 供 选择 。 前 
者 是 将 设计 经 综合 ,布局 布线 后 生成 的 二 进 制 文件 下 载 至 可 编程 逻辑 器 件 的 芯片 中 ,利用 信 
号 发 生 器 输入 各 类 信号 ,然后 执行 板 级 测试 。 该 方法 的 优点 在 于 能 够 直接 验证 设计 的 实际 
工作 情况 ,接近 真实 的 物理 运行 环境 ,可 信和 度 最 高 。 而 缺点 主要 有 以 下 方面 。 

(1) 该 方法 难以 保证 验证 的 充分 性 ,难以 充分 验证 大 规模 复杂 设计 的 功能 和 时 序 正确 
性 。 基 于 硬件 环境 的 验证 ,难以 构造 复杂 的 .异常 的 ,极端 的 测试 场景 ,难以 覆盖 所 有 的 功能 
要 求 。 

(2) 验证 环境 的 搭建 相对 复杂 ,验证 成 本 高 。 真 实 硬件 测试 环境 的 搭建 相对 软件 环境 
更 为 复杂 ,维护 、. 调 试 的 时 间 开 销 大 , 且 缺 少 灵活 性 , 想 要 尽 可 能 覆盖 所 有 的 功能 和 性 能 指 
标 ,成 本 较 高 。 

(3) 基于 硬件 环境 的 测试 相对 滞后 ,通常 在 设计 完成 后 才能 够 实施 ,无 法 在 设计 的 早期 
介入 。 因 此 ,大 型 复杂 设计 的 验证 无 法 依赖 于 硬件 测试 完成 。 由 于 在 整个 FPGA 开发 过 程 
中 ,硬件 测试 的 时 间 相 对 滞后 ,设计 缺陷 的 修复 成 本 和 难度 也 更 大 。 

(4) 难以 发 现 和 定位 时 序 上 的 错误 ,由 于 时 序 问 题 具有 偶发 性 和 环境 敏感 性 ,因而 在 芯 
片 级 的 测试 中 很 难 发 现 该 类 错误 。 

(5) 难以 准确 定位 缺陷 。 基 于 硬件 的 测试 能 够 观测 到 的 信号 均 为 芯片 的 外 部 信号 ,发 
现 功能 不 符合 要 求 时 ,需要 查看 内 部 信号 的 状态 才能 够 定位 问题 。 

仿真 测试 平台 能 够 不 依赖 于 真实 硬件 环境 即 可 构造 被 测 设计 运行 所 需要 的 各 种 激励 ， 
从 而 全 面 地 验证 设计 的 有 效 性 和 正确 性 。 相 比 之 下 ,仿真 测试 具有 如 下 优点 。 

(1) 不 需要 搭建 硬件 环境 .可 以 在 综合 前 ,综合 后 、 布 局 布线 后 等 各 个 设计 阶段 接 入 ,能 
够 在 设计 的 早期 发 现 设 计 中 潜在 的 问题 ,验证 成 本 较 低 。 

(2) 能 够 方便 灵活 地 提供 各 种 类 型 的 激励 信号 ,复杂 和 异常 测试 激励 的 构造 相对 容易 ， 
便于 准确 验证 被 测 设计 正常 或 异常 的 功能 处 理 。 

(3) 能 够 观察 到 任务 模块 层次 下 的 各 个 信和 号 的 状态 ,在 出 现 问题 时 更 容易 定位 错误 。 

(4) 便于 统计 测试 的 覆盖 率 情况 .能 够 定量 地 评估 测试 的 覆盖 性 ,以 确保 测试 的 充 
分 性 。 

(5) 便于 大 规模 复杂 设计 的 验证 ,仿真 测试 的 灵活 性 使 得 构造 复杂 的 信号 激励 以 及 复 
杂 测 试 场景 变 得 更 加 容易 。 

(6) 能 够 发 现时 序 错 误 。 在 时 序 仿真 中 ,可 以 精确 地 控制 各 类 信号 的 时 序 关 系 ,从 而 验 
证 外 部 输入 信号 时 序 异 常 对 系统 处 理 的 影响 ,进而 发 现 和 定位 时 序 错误 。 

(7) 适合 团队 进行 协同 测试 ,提高 测试 的 效率 。 

仿真 测试 按照 层次 的 不 同 . 可 以 分 成 功能 仿真 (针对 设计 代码 实施 ) 、 门 级 仿真 (针对 综 
合 后 网 表 实 施 ) 和 时 序 仿真 (针对 布局 布线 后 的 网 表 实 施 ) 。 

仿真 测试 主要 用 于 发 现 以 下 类 别 的 错误 : 

(1) 功能 实现 不 满足 设计 要 求 ; 

(2) 时 序 指标 不 满足 设计 要 求 ; 
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(3) 对 异常 情况 的 处 理 措施 不 完善 ; 
(4) 信号 读 写 冲突 ; 
(5) 功能 缺失 或 多 余 。 





10.3.2 仿真 测试 平台 的 组 成 


针对 特定 的 可 编程 逻辑 器 件数 字 系 统 或 者 子 模块 ,需要 根据 该 被 测 件 的 接口 搭建 仿真 
平台 ,典型 的 仿真 测试 平台 的 组 成 如 图 10-13 所 示 。 念 真 测试 平台 通常 包括 时 钟 模块 .激励 
模块 .存储 模块 、 桩 模块 信息 显示 模块 . 自 校 验 模块 等 。 各 个 模块 的 作用 如 下 。 

























时 钟 模块 “ 广 一 一 “| 
三 激励 模块 】 信息 显示 模块 
被 测 件 
一 
le 自 校 验 模块 
桩 模块 -== 


图 10-13 ”仿真 测试 平台 的 构成 


(1) 时 钟 模块 : 用 于 为 被 测 件 提供 驱动 时 钟 ,测试 输入 的 时 钟 必须 与 被 测试 设计 所 要 
求 的 时 钟 一 致 ,包括 时 钟 频率 、 占 空 比 和 相位 关系 。 

(2) 激励 模块 : 用 于 提供 被 测 件 运行 所 需要 的 各 种 激励 信号 ,激励 信号 是 依 时 间 序 列 
添加 的 。 根 据 时 间 推 进 机 制 的 不 同 可 分 成 绝对 时 间 激 励 和 相对 时 间 激 励 , 前 者 激励 值 的 变 
化 是 参照 仿真 零 时 刻 的 ,后 者 先 指定 一 个 初始 值 .然后 在 仿真 激励 触发 以 前 一 直 等 待 一 个 
事件 。 

(3) 存储 模块 : 满足 被 测 件 进行 存储 操作 的 运行 要 求 ,通过 模拟 SRAM、FLASH 或 
ROM 实现 。 

(4) 桩 模块 : 构建 被 测 件 所 需要 调用 的 其 他 支持 模块 或 者 系统 。 

(5) 信息 显示 模块 : 用 于 输出 被 测 件 的 运行 信息 .通过 观察 波形 或 者 采用 $ display 或 
$ monitor 调用 实现 。 

(6) 自 校 验 模块 : 利用 断言 或 者 信号 比较 ,检查 被 测 件 的 输出 与 期 望 结果 是 否 一 致 。 


10.3.3 仿真 测试 的 流程 


执行 FPGA 的 仿真 测试 时 .工作 流程 如 图 10-14 所 示 ( 虚 线 框 中 给 出 了 仿真 平台 的 编写 
实例 )。 图 10-14 的 虚线 部 分 给 出 了 对 采用 Verilog 语言 实现 的 寄存 器 移 位 操作 模块 shift_ 
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reg 的 功能 仿真 测试 流程 。 

















1 1 
1 
module test_tb; | 
1 1 shift_reg dut(.clock(clock), | 
i ro 
ai 
1 always#50clock=~clock; |! 1 .shiftreg(shiftreg), | 
| Initial 1 | data(data), 
! Begin | 1 1 sel(seD)); 1 
| reset=0; 1 _」 为 被 济 件 的 实例 L endmodule//test tb | 
! #100 提供 系统 的 时 钟 及 复位 
1 reset= 1; 1 ROOM 可 
| End 1 module test_tb; 
1 endmodule // test_tb ly 1 reg load; 
上 


reg [1:0] sel; 























endmodule // test_tb 
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1 
ed 1 
寄存 器 定义 及 初始 化 “| 一---| "e8 [4:0] data; | 
S 
| 1 | initial begin | 
| 3 | | | load=0; | 
1 load =0; ' -一 一 - | data = 5 00000; 1 
! sel = 2°00; Ft 一 -| ”为 不 同 模块 提供 激励 1 sel = 2°00; lL 
1 #200 load=1; | 1 end 1 
| #200 data = 300001; ! 1 endmodule Wtest_tb | 
1 #100 sel= 201; 1 
(te | | 设计 自 检验 模块 、 断 言 和 | __- 
1 en 1 息 
1 1 
Ls 


I$timeformat( 9,1", ns 12); 





$display(" Time CIk Rst Ld SfiRg 




















1 
| 

1 

| 

1 

1 ! 入 | 

全 | 运行 仿真 平台 $monitor("%t %b %b %b Wb Wb 1 

[ET da |%b"Srealtime,clock,reset,load, | 
Ishifireg,data,sel); 1 

1 end 1 

仿真 数据 收集 和 比 对 lendmodule // test_tb "| 

we | ee 





图 10-14 仿真 平台 的 工作 流程 





仿真 结果 数据 收集 和 比 对 可 以 采用 波形 比 对 、 数 据 库 记 录 比 较 或 者 自 定 义 比 对 模块 输 
出 等 方式 实现 。 

在 构建 仿真 测试 平台 过 程 中 应 注意 以 下 9 个 方面 : 

(1) 使 用 统一 的 编码 风格 .包括 文件 头 、 修 订 列 表 、 注 释 、 命 名 规则 、 文 件 和 目录 结构 等 ， 
以 便于 测试 平台 的 管理 ; 





(2) 根据 测试 目标 ,明确 安排 激励 的 发 生 和 变化 顺序 ,确保 测试 结果 的 一 致 性 和 可 重 
复 性 ; 

(3) 尽量 利用 控制 巡 辑 ($ end、$ stop) 控 制 仿真 的 开始 和 结束 条 件 , 除 时 钟 外 ,避免 使 
用 无 限 循环 ; 


(4) 将 激励 分 成 独立 的 设计 模块 .根据 模块 的 相关 性 进行 激励 模块 的 划分 ,便于 激励 的 
控制 与 测试 平台 的 维护 和 更 新 ; 

(5) 避免 显示 不 重要 的 数据 ,以 提高 仿真 的 速度 .便于 数据 分 析 ; 

(6) 优化 仿真 中 双向 信号 的 使 用 .例如 总 线 数据 ,避免 因 测 试 平台 的 错误 干扰 仿真 结 
的 分 析 ; 
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(7) 仿真 中 应 对 寄存 器 或 存储 器 进行 显 式 的 初始 化 ,避免 仿真 中 出 现 不 定 态 , 难 以 获得 
正确 的 结果 数据 ; 

(8) 采用 模块 化 和 参数 化 .提高 测试 平台 的 可 扩展 性 和 可 维护 性 ; 

(9) 合理 划分 测试 范畴 ,确定 明确 .单一 的 测试 目标 ,避免 在 同一 个 测试 平台 中 观察 多 
种 仿真 结果 ,提高 仿真 的 针对 性 ,降低 分 析 难 度 。 


10.3.4 功能 仿真 测试 


功能 仿真 测试 是 在 不 包含 信号 传输 延 时 信息 的 条 件 下 ,利用 仿真 方法 验证 设计 的 多 辑 
功能 是 否 正确 的 过 程 。 功 能 仿真 一 般 应 包含 如 下 内 容 。 

(1) 依据 测试 用 例 的 要 求 , 建 立功 能 仿真 环境 , 编制 仿真 测试 激励 向 量 , 应 满足 被 测 软 
件 外 部 输入 的 功能 性能、 时序 .接口 等 要 求 。 

(2) 在 仿真 工具 中 开展 功能 仿真 工作 ,人 工 或 自动 检测 仿真 结果 ,并 依据 判定 准则 确定 
测试 用 例 是 否 通过 。 

(3) 统计 语句 .条 件 . 分 支 . 表 达 式 等 覆盖 率 信息 ,对 未 覆盖 的 情况 进行 影响 域 分 析 。 

在 整个 的 测试 流程 中 ,功能 仿真 的 工作 量 最 大 ,需要 编写 大 量 的 测试 激励 ,才能 保证 测 
试 的 充分 性 。 为 了 对 测试 的 充分 性 加 以 定量 的 衡量 ,引入 测试 覆盖 率 的 概念 ,常用 的 覆盖 率 
指标 主要 包括 语句 覆盖 率 、 分 支 覆 盖 率 .条 件 覆 盖 率 .表达 式 覆 盖 率 .翻转 覆盖 率 、. 状 态 机 状 
态 覆 盖 率 .状态 机 转移 覆盖 率 等 ,其 中 

语句 覆盖 率 = (至 少 被 执行 一 次 的 语句 数量 )/( 可 执行 的 语句 总 数 ) 

分 支 获 盖 率 二 (判定 结果 至 少 被 评价 一 次 的 数量 )/ (判定 结果 的 总 数 ) 

条 件 覆 盖 率 = (条 件 操作 数值 至 少 被 评价 一 次 的 数量 )/( 条 件 操 作 数 值 的 总 数 ) 

表达 式 覆 盖 率 = (表达 式 条 件 操作 数值 至 少 被 评价 一 次 的 数量 )/( 表 达 式 条 件 操作 数值 

的 总 数 ) 
翻转 覆盖 率 = (被 测 罗 辑 节点 发 生 状 态 翻转 一 次 的 状态 转换 )/( 被 测 迎 辑 节 点 所 有 的 状 
态 转换 的 种 类 ) 

状态 机 状态 覆盖 率 = (状态 机 在 仿真 过 程 中 至 少 到 达 一 次 的 状态 数量 )/( 状 态 机 包含 的 

状态 总 数 ) 

状态 机 转移 覆盖 率 =( 状 态 机 在 仿真 过 程 至 少 覆 盖 一 次 的 状态 转移 路 径 )/( 状 态 机 中 包 

含 的 所 有 状态 转移 路 径 总 数 ) 

在 测试 过 程 中 .应 根据 被 测 对 象 的 关键 等 级 、 规 模 、 测 试 资源 和 领域 要 求 合理 地 确定 各 
项 覆盖 率 指 标 。 一 般 地 ,对 于 高 关键 等 级 的 设计 ,测试 中 要 求 语句 覆盖 率 、 分 支 覆盖 率 和 条 
件 覆盖 率 均 达 到 100% 。 某 些 模块 的 覆盖 率 未 达到 要 求 , 应 说 明 原 因 . 并 分 析 其 影响 。 对 于 
低 关键 等 级 的 设计 ,测试 中 需要 根据 需要 ,选取 关键 模块 ,提出 较 高 的 测试 覆盖 率 要 求 。 

测试 过 程 中 ,需要 针对 测试 工具 给 出 的 覆盖 率 信息 .不断 完善 测试 平台 ,添加 或 修改 测 
试用 例 , 在 迭代 中 提高 测试 的 覆盖 率 , 以 提高 测试 的 充分 性 。 

功能 仿真 测试 便于 发 现 被 测 设计 实现 中 与 需求 不 一 致 的 地 方 。 例 如 对 某 个 可 编程 串 行 
通信 接口 进行 功能 仿真 验证 时 发 现 ,该 接口 对 地 址 为 0x3FD 的 配置 寄存 器 进行 写 人 时 , 写 
人 后 的 寄存 器 值 与 DATA 总 线 上 的 预 置 值 不 一 致 .导致 寄存 器 配置 错误 。 具 体 地 ,在 地 址 
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0x03FDH 向 配置 寄存 器 写 和 人 值 0x33(DATA 总 线 上 的 值 ), 配 置 寄存 器 的 值 由 原始 值 0x61 
变 为 0x73 ,而 不 是 要 求 的 0x33。 功 能 仿真 输出 如 图 10-15 所 示 。 








10-15 ”功能 仿真 实例 


10.3.5 门 级 仿真 测试 


门 级 仿真 是 针对 逻辑 综合 后 网 表 文 件 开展 的 仿真 测试 , 门 级 仿真 一 般 包 括 以 下 工作 
内 容 : 


(1) 依据 测试 用 例 的 要 求 ,建立 门 级 仿真 环境 ,编制 仿真 激励 测试 向 量 , 针 对 浊 辑 综合 






后 的 网 表 文 件 开展 门 级 仿 野 
(2) 在 仿真 工具 中 开展 门 级 仿真 工作 ,人 工 或 自动 检测 仿真 结果 
门 级 仿真 多 用 于 对 状态 机 的 测试 ,主要 包括 如 下 内 容 : 
(1) 状态 机 是 否 存 在 多 余 状 态 ; 

理 ; 


(2) 状态 机 的 编码 类 型 是 否 

(3) 状态 机 的 恢复 性 是 否 汪 

(4) 状态 机 的 安全 性 是 

(5) 是 否 存 在 死 状态 ; 

(6) 状态 机 的 防 危 措施 是 否 得 当 

在 实际 测试 中 ,应 对 包含 复杂 状态 机 的 设计 内 容 进 行 门 级 仿真 测试 。 例 如 ， i 
1553B 接口 控制 芯片 进行 门 级 仿真 测试 时 发 现 ,在 QuestaSim 中 ,将 State 寄存 器 的 值 强制 
为 一 个 不 存在 的 值 . 经 过 一 个 运行 周期 后 ,将 该 强制 值 取消 .该 设计 模块 的 状态 机 ee 
常 状 态 中 恢复 ,依然 处 于 “ 跑 飞 ”状态 ,无 法 正常 完成 数据 接收 。 经 排查 发 现 , 开 发 人 员 设 计 
该 状态 机 时 ,没有 采用 安全 的 状态 编码 (如 格雷 码 等 ) ,状态 机 进入 异常 状态 时 无 法 重新 恢复 
到 正常 的 状态 机 模式 ,进而 导致 设计 失效 。 















10.3.6 时 序 仿真 测试 


时 序 仿真 测试 是 指 在 包含 信号 传输 的 门 级 延 时 和 布线 延 时 信息 的 条 件 下 ,用 仿真 方法 
验证 布局 布线 后 功能 和 时 序 是 否 正确 的 测试 。 时 序 测试 主要 关注 以 下 内 容 : 

(1) 接口 时 序 设计 是 否 合理 .满足 要 求 ; 

(2) 关键 信号 的 输出 时 序 是 否 正确 ; 
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(3) 异步 信号 的 处 理 时 序 是 否 正确 ; 
(4) 不 同 工 况 下 的 信号 处 理 是 否 正 确 。 
时 序 测试 需要 依据 FPGA 片 级 的 输入 和 输出 接口 时 序 要 求 ,构造 时 序 仿 真 测试 用 例 。 
考察 在 时 序 仿真 下 ,当前 设计 能 和 否 正确 响应 符合 时 序 接口 要 求 的 输入 信号 ;设计 的 输出 
信和 号 能 否 满足 外 部 的 时 序 ;输出 信号 是 否 稳定 ,有 无 不 定 态 拌 动 。 

实际 测试 中 ,时 序 仿真 往往 运行 与 功能 仿真 相同 的 测试 激励 ,将 被 测 对 象 由 RTL 设计 
模块 变 为 布局 布线 后 的 网 表 文 件 即 可 。 时 序 仿 真 的 输出 结果 与 功能 仿真 不 一 致 或 者 存在 外 
部 接口 输出 的 不 定 态 , 则 意味 着 存在 时 序 错误 。 

图 10-16 为 对 某 数字 控制 单元 执行 功能 仿真 时 的 输出 ,各 个 控制 信号 (col_en、p_en、r 
en tic_en) 的 状态 是 确定 的 ,图 10-17 为 对 其 在 典型 工 况 下 进行 时 序 仿真 时 的 输出 结果 , 显 
然 各 个 控制 信号 的 输出 出 现 了 不 定 态 ,说 明 当 前 设计 中 存在 设计 错误 或 时 序 违规 。 

















































10-17 ”控制 信号 输出 的 时 序 仿真 结果 


10.3.7 仿真 测试 支持 工具 


目前 ,开发 人 员 通 常 利用 芯片 厂商 提供 的 集成 开发 环境 (integrate development 
environment,IDE) 完 成 大 部 分 的 仿真 验证 工作 。 但 是 IDE 开发 环境 对 大 规模 FPGA 设计 
的 测试 支持 不 足 ,存在 仿真 效率 不 高 不 支持 高 级 验证 方法 学 不 支持 跨 语言 混合 设计 测试 、 
对 测试 覆盖 率 统计 支持 有 限 等 缺点 ,无 法 满足 第 三 方 评测 的 技术 要 求 。 为 了 满足 测试 的 需 
要 ,尤其 是 保证 高 关键 等 级 软件 的 测试 充分 性 的 要 求 , 需 要 建立 通用 型 的 ,能 够 兼容 不 同类 
型 芯片 的 仿真 支持 平台 .应 满足 如 下 条 件 : 

(1) 支持 主流 的 芯片 厂商 Altera、Xilinx、Actel 等 ; 

(2) 支持 大 规模 FPGA 设计 的 测试 仿真 ; 

(3) 具有 较 高 的 测试 效率 ,仿真 时 间 在 可 容忍 的 范围 内 ; 

(4) 能 够 统计 测试 的 功能 覆盖 、 条 件 覆 盖 、 分 支 覆盖 和 语句 覆盖 情况 ; 

(5) 支持 高 级 验证 方法 学 ; 
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(6) 支持 混合 语言 实现 的 FPGA 设计 的 测试 ; 

(7) 能 够 辅助 搭建 功能 仿真 和 时 序 仿真 的 框架 ; 

(8) 方便 进行 Test bench 的 组 织 和 管理 。 

常用 的 仿真 支持 工具 主要 有 ISE、 Quartus 上 [、Modelsim、Questasim、VCS 和 IES 等 。 这 些 
工具 是 由 芯片 商 为 FPGA 开发 者 提供 的 , 仅 能 支持 特定 芯片 平台 的 FPGA 设计 ,无 法 提供 足 
够 的 方法 学 和 覆盖 率 测试 支持 。 而 Questasim 作为 Modelsim 的 升级 版 本 ,不 仅 能 够 方便 地 针 
对 不 同 平台 的 FPGA 设计 进行 仿真 测试 ,还 能 够 提供 高 级 验证 方法 学 、 混 合 语言 .断言 等 先进 
的 测试 方法 。 相 比 其 他 的 仿真 测试 支持 工具 ,Questasim 具有 如 下 技术 优势 。 

(1) Questasim 能 够 支持 复杂 激励 信号 组 合 的 自动 生成 ,激励 情形 以 约束 的 方式 描述 
出 来 。 这 些 约束 的 随机 特征 能 够 显著 提高 测试 平台 的 设计 复 用 , 极 大 地 缩减 测试 开发 和 修 
改 的 次 数 , 提 高 了 测试 设计 效率 。 

(2) Questasim 可 以 管理 并 收集 代码 覆盖 率 、 功 能 覆盖 率 和 断言 覆盖 率 统计 数据 ,并 统 
一 存储 在 数据 库 中 ,通过 关联 测试 覆盖 率 和 测试 对 象 ,促进 验证 进度 跟踪 和 测试 资源 的 合理 
高 效 配置 。 

(3) Questasim 具有 测试 分 析 能 力 , 将 原始 覆盖 率 数 据 转变 为 可 操作 、 易 识别 的 信息 ， 
能 够 识别 元 余 测 试 .并 基于 测试 项 覆盖 率 判断 是 否 进 行 优先 测试 。 

(4) Questasim 通过 支持 所 有 主流 验证 语言 和 多 个 验证 引擎 ,并 最 大 限度 地 发 挥 断言 
的 技术 优势 ,有 效 提升 验证 和 调试 效率 ,保证 设计 质量 并 改善 验证 结果 的 可 预测 性 。 断 言 技 
术 的 运用 改善 了 测试 的 可 观测 性 ,便于 查找 设计 中 错误 的 源头 ,提高 了 测试 的 效率 。 


10.4 ” 软 三 协同 验证 


10.4.1 验证 环境 构成 


软 硬 协同 验证 (SW/HW co-verification) 源 于 逻辑 仿真 技术 .通常 由 一 个 硬件 执行 环境 
和 一 个 软件 验证 环境 组 成 ,通过 时 间 和 命令 .采用 一 些 机 制 在 两 个 环境 中 进行 控制 和 信息 交 
互 ,硬件 仿 真 通过 运行 在 工作 站 上 的 软件 程序 进行 模拟 ,通过 设 定 的 通信 接口 与 软件 执行 模 
块 进行 信息 交互 。 典 型 的 可 编程 多 辑 器 件 软 硬 件 协 同 验证 环境 如 图 10-18 所 示 。 


国 _ PCI 总 线 


计算 机 软件 














硬件 模拟 器 








硬件 加 速 器 











图 10-18 ” 软 硬 协同 验证 环境 


硬件 加 速 器 和 硬件 模拟 器 一 起 构成 被 测 设计 (DUT) 的 运行 环境 ,这 种 方式 能 够 提供 优 
于 纯 软 件 仿真 的 仿真 运行 速度 以 及 优 于 纯 硬 件 验证 的 信号 可 观测 性 ,能 够 综合 地 验证 被 测 
设计 的 功能 和 时 序 。 总 线 功能 模型 (bus function model, BFM) 用 于 对 信号 的 时 序 进行 抽象 
和 封装 ,忽略 信和 号 的 具体 时 钟 周期 ,将 其 转化 为 以 事物 为 单位 来 进行 测试 激励 的 传递 ,从 而 
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提高 测试 仿真 的 运行 速度 。 计 算 机 软件 主要 完成 测试 向 量 的 生成 ,测试 数据 的 注入 、 事 务 的 l 汪 
调度 与 控制 ,计算 机 通过 PCI 总 线 与 被 测 设计 的 加 速 板 连接 。 


10.4.2 支持 工具 


目前 ,业界 主流 的 支持 软 硬 协同 验证 的 工具 及 其 特点 如 表 10-9 所 示 。 


生产 厂家 


产品 型 号 


表 10-9 软 硬 协 同 支持 工具 
特 ”点 





MentorGraphics 


Cadence 


Seamless 


Palladium 亚 


对 软 硬 件 执行 完全 的 可 视 化 和 控制 

在 设计 早期 对 硬件 /固件 /软件 的 有 效 调试 
快 于 逻辑 仿真 器 1000 一 10000 倍 的 动态 优化 
支持 超过 100 个 嵌入 式 CPU、DSP 和 FPGA 


通过 仿真 加 速 和 仿效 ,使 得 验证 速度 提高 100 一 100000 倍 
支持 软 硬 件 协同 验证 

最 大 容量 为 256M 门 ASIC 和 74GB 存储 器 

最 大 验证 速度 为 2MHz 

最 大 IO 端口 数 为 61440 个 


二 





Synopsys 


Xilinx 





扩展 型 


Confirma 


ML510 
Embedded 
Development 
Platform 


10.5 板 级 验证 


10.5.1 作用 





硬件 部 分 

。 CHIPit 系列 快速 原型 系统 带 有 一 个 可 实现 更 大 自动 化 的 可 编 
程 互联 架构 ,并 提供 了 专 为 基于 事务 的 验证 而 优化 的 类 仿真 
能 力 

。 HAPSTM 系列 快速 原型 板 为 系统 验证 和 嵌 人 式 软件 开发 提供 
了 较 高 的 性 能 

。 集 中 了 广泛 的 高 速 接口 和 扩展 板 ,确保 了 各 种 原型 可 以 被 很 轻 
松 地 定制 ,并 涵盖 了 一 个 广泛 的 应 用 范围 

软件 工具 

。 CHIPit Manager Pro 原型 配置 和 项 目 管理 软件 

。 与 SCE-MI( 标 准 协同 仿真 建 模 接口 ) 兼 容 的 基于 事务 的 协同 验 
证 接口 

。 Certify@ 多 FPGA 实现 和 分 区 软件 

。 Identify@ Pro 调试 软件 . 带 有 TotalRecalTM 可 视 度 增 强 技术 

。 Synplify@ Premier 技 术 领 先 的 FPGA 物理 综合 工具 


XilinxVirtex-5FPGA 

2* 512MBDDR2 

通过 Rocket IO GTX transceivers 的 高 速 IO 
JTAG 追踪 及 调试 


板 级 验证 是 将 整个 由 可 编程 旭 辑 器 件 组 成 的 数字 系统 (电路 板 ) 作 为 测试 对 象 , 用 于 验 
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证 系统 整体 的 功能 ,性 能 和 接口 等 。 一 方面 :由 于 系统 的 真实 运行 状况 不 仅 与 功能 逻辑 和 时 
序 设计 有 关 , 还 与 所 选用 可 编程 巡 辑 器 件 的 芯片 类 型 时钟 指标 、 温 度 . 电 压 等 物理 指标 有 
关 , 因 此 , 受 此 影响 的 一 些 关键 功能 、 性 能 指标 需要 用 板 级 验证 的 方法 进行 测试 ; 另 一 方面 
被 测 系统 需要 与 外 部 模块 ,系统 进行 通信 ,与 之 相关 的 接口 兼容 性 需要 利用 板 级 验证 的 手段 
加 以 测试 。 


10.5.2 板 级 验证 的 典型 环境 


进行 板 级 测试 时 ,需要 针对 被 测 对 象 的 实际 运行 环境 搭建 测试 环境 ,需要 利用 观测 设备 
进行 运行 结果 的 观察 。 一 个 典型 的 板 级 验证 环境 如 图 10-19 所 示 。 


信号 


控制 器 


支持 系统 


ul 





关联 系统 





图 10-19 板 级 验证 环境 的 组 成 


该 环境 主要 由 以 下 几 部 分 组 成 。 

(1) 信号 源 : 用 于 产生 被 测 件 所 需要 的 输入 信号 ,通常 利用 专用 测试 仪 、 回 波 记录 仪 、 
MATLAB 仿真 或 者 微机 等 产生 。 

(2) 控制 器 : 主要 用 于 向 被 测 件 发 送 关键 的 控制 信和 号 ,如 起 停 信 号 、 复 位 信号、 模式 切 
换 信号 等 。 

(3) 支持 系统 : 用 于 提供 被 测 件 运行 所 需要 的 温度 .电压 .电流 等 支持 环境 。 

(4) 关联 系统 : 指 被 测 系统 运行 过 程 中 需要 进行 通信 的 其 他 系统 或 者 模块 。 

(5) 信号 采集 : 通常 利用 频谱 仪 .示波器 、 解 码 器 等 仪器 观察 被 测 件 的 输出 ,以 便于 进 
行 结 果 分 析 。 

(6) 结果 分 析 : 利用 示波器 进行 波形 比 对 或 者 利用 计算 机 进行 图 像 . 音 频 或 者 数据 的 
验证 比 对 ,判断 结果 是 否 符合 预期 。 


10.S$.3 板 级 验证 的 流程 


进行 板 级 验证 的 流程 如 图 10-20 所 示 。 
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搭建 测试 环境 


EE 


依据 测试 目标 ， 构 建 测试 场景 
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准备 测试 所 需要 的 各 种 信号 

















运行 测试 





采集 测试 结果 
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测试 结果 分 析 与 评估 


图 10-20 板 级 验证 的 流程 














CHAPTER 11 





测试 工具 


11.1 概述 


软件 测试 是 一 项 很 复杂 而 费时 的 工作 ,仅仅 依靠 测试 人 员 手 工 完成 是 很 困难 的 。 所 以 ， 
必须 研究 测试 工具 以 帮助 测试 人 员 自 动 或 半自动 地 完成 测试 。 好 的 测试 工具 能 够 提高 测试 
效率 从 而 降低 测试 成 本 ,选择 更 高 的 测试 充分 性 标准 进行 测试 从 而 提高 软件 质量 。 目 前 市 
场 上 的 软件 测试 工具 ,根据 测试 工具 原理 的 不 同 分 为 静态 测试 工具 ,动态 测试 工具 和 测试 管 
理工 具 等 。 


1. 静态 测试 工具 

静态 测试 工具 直接 对 代码 进行 分 析 , 不 需要 运行 代码 ,也 不 需要 对 代码 编译 链接 ,生成 
可 执行 文件 。 静 态 测试 工具 一 般 是 对 代码 进行 语法 扫描 , 找 出 不 符合 编码 规范 的 地 方 ,根据 
某 种 质量 模型 评价 代码 的 质量 ,生成 系统 的 调用 关系 图 等 。 常 用 的 静态 测试 工具 有 
Logiscope .PRQA ,SpyGlass,PrimeTime,Formalpro、QuestaFormal 等 。 


2. 动态 测试 工具 

动态 测试 工具 与 静态 测试 工具 不 同 ,动态 测试 工具 一 般 采 用 “ 插 桩 "的 方式 ,向 代码 生成 
的 可 执行 文件 中 插入 一 些 监 测 代码 .用 来 统计 程序 运行 时 的 数据 。 其 与 静态 测试 工具 最 大 
的 不 同 就 是 动态 测试 工具 要 求 被 测 系 统 实际 运行 。 常 用 的 动态 测试 工具 有 QACenter、 
WinRunner ,JUnit、Testbed、CodeTest、QuestaSim 等 。 


3. 测试 管理 工具 

软件 评测 是 发 现 软件 问题 ,确保 软件 质量 的 有 效 手段 ,而 软件 评测 的 质量 取决 于 测试 技 
术 水 平和 测试 过 程 管理 水 平 。 为 保证 软件 评测 项 目 按时 、 保 质 完成 ,加 强 评测 工作 的 组 织 和 
科学 管理 显得 尤为 重要 。 评 测 过 程 管理 中 存在 管理 工作 节点 众多 .相互 间 依赖 性 强 .评测 项 
目 信 息 及 数据 繁杂 ,评测 文档 之 间 一 致 性 难以 保障 等 多 个 难题 ,给 评测 过 程 的 管理 带 来 了 很 
大 的 麻烦 , 且 效 率 低 、 效 果 差 。 因 此 .对 评测 过 程 实施 科学 、 有 效 地 管理 .必须 借助 于 得 力 的 
自动 化 工具 。 一 般 而 言 ,测试 管理 工具 对 测试 需求 ,测试 计划 ,测试 用 例 、 测 试 实施 进行 管 
理 , 并 且 测 试管 理工 具 还 包括 对 缺陷 的 跟踪 管理 。 常 用 的 测试 管理 工具 有 TestCenter、TP- 
Manager 等 。 

除了 上 述 的 测试 工具 外 ,还 有 一 些 专 用 的 测试 工具 ,比如 用 于 数据 库 测 试 的 TestBytes 、 用 
于 性 能 优化 的 EcoScope、 用 于 页 面 链接 测试 的 LinkSleuth 等 。 
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11.2 静态 测试 工具 


11.2.1 Logiscope 


1. 工具 概述 

Logiscope 是 法 国 Telelogic 公司 推出 的 专用 于 软件 质量 保证 和 软件 测试 的 产品 。 
Logiscope 是 面向 源 代码 进行 工作 的 ,应 用 于 软件 的 整个 生命 周期 ,贯穿 于 软件 开发 .代码 
评审 .单元 测试 .集成 测试 .系统 测试 以 及 软件 维护 阶段 。 其 主要 功能 是 对 软件 做 质量 分 析 
和 测试 以 保证 软件 的 质量 ,并 可 实现 认证 \ 反 向 工程 和 维护 ,特别 适合 针对 可 靠 性 和 安全 性 
要 求 高 的 软件 项 目 。 

在 设计 和 开发 阶段 ,使 用 Logiscope 对 软件 的 体系 结构 和 编码 进行 确认 ,可 以 在 尽 可 能 
的 早期 阶段 检测 那些 关键 部 分 ,寻找 潜在 的 错误 ,可 帮助 项 目 组 成 员 编 制 符 合 企业 标 准 的 文 
档 , 改 进 不 同 开发 组 之 间 的 交流 。 在 测试 阶段 使 用 Logiscope, 可 针对 软件 结构 ,度量 测试 覆 
盖 的 完整 性 ,评估 测试 效率 ,确保 满足 测试 要 求 ,还 可 以 自动 生成 相应 的 测试 分 析 报 告 。 在 
软件 维护 阶段 使 用 Logiscope, 能 够 验证 软件 质量 是 否 已 得 到 保证 。 对 于 状态 不 确定 的 软 
件 ,Logiscope 可 以 迅速 提交 软件 质量 的 评估 报告 ,大 幅度 减少 理解 性 工作 ,避免 非 受 控 修 
改 引发 的 错误 。 

该 产品 的 最 终 目 的 是 评估 和 提高 软件 的 质量 等 级 ,采用 基于 国际 标准 度量 方法 (如 
Halstead、McCabe 等 ) 的 质量 模型 对 软件 进行 分 析 , 从 软件 的 编程 规则 、 静 态 特 征 和 动态 测 
试 覆盖 等 多 个 方面 .量化 地 定义 质量 模型 ,并 检查 ,评估 软件 质量 。 


2. 产品 功能 

Logiscope 包括 3 个 工具 ,下 面 分 别 介 绍 其 功能 。 

1) Logiscope RuleChecker 

根据 工程 中 定义 的 编程 规则 自动 检查 软件 代码 错误 .Logiscope RuleChecker 可 直接 定 
位 错误 。 该 工具 包含 大 量 标 准 规则 ,用 户 也 可 定制 创建 规则 ,包括 结构 化 编程 规则 、 面 向 对 
象 编程 规则 等 。 具 体 而 言 , 这 些 规 则 有 : 命名 规则 ,如 变量 名 首 字母 大 写 等 :控制 流 规则 ,如 
不 允许 使 用 GOTO 语句 等 。 这 些 规则 可 以 根据 实际 需要 进行 选择 ,也 可 以 按照 自己 的 实际 
需求 更 改 和 添加 规则 。 该 工具 使 用 所 选 规则 对 源 代码 逐一 进行 验证 ,指出 所 有 不 符合 编程 
规则 的 代码 及 其 违反 的 规则 。 

Logiscope 提供 编码 规则 与 命名 检验 ,这 些 规 则 根据 业界 标准 和 经 验 制订 。 因 此 ,可 建 
立 企业 可 共同 遵循 的 规则 与 标准 ,避免 不 良 的 编程 习惯 及 彼此 不 相 容 的 困扰 。 同 时 
Logiscope 还 提供 规则 的 裁剪 和 编辑 功能 ,可 以 用 Tecl ,脚本 和 编程 语言 定义 新 的 规则 。 

2) Logiscope Audit 

Logiscope Audit 可 以 定位 错误 模块 .评估 软件 质量 及 复杂 程度 。 该 工具 提供 代码 的 直 
观 描述 ,能 够 自动 生成 软件 文档 。 该 工具 以 ISO 9126 模型 作为 质量 评价 模型 的 基础 ,质量 





pe 
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评价 模型 描述 了 从 Halstead、McCabe 的 度量 方法 学 和 Verilog 引入 的 质量 方法 学 中 的 质量 
因素 (可 维护 性 .可 重用 性 等 ) 和 质量 准则 (可 测试 性 .可 读 性 等 ) ,将 被 评价 的 软件 与 规定 的 
质量 模型 进行 比较 ,并 用 图 形 形 式 显示 。 因 此 ,质量 人 员 可 以 把 精力 集中 到 需要 修改 的 代码 
部 分 ,对 与 质量 要 素 和 质量 模型 不 一 致 的 地 方 给 予 解释 和 纠正 。 具 体 的 图 形 表示 法 有 以 下 
3 种 : 

(1) 整个 应 用 的 体系 结构 : 显示 部 件 之 间 的 关系 ,评审 系统 设计 ; 

(2) 具体 部 件 的 逻辑 结构 : 通过 控制 流 图 显示 具体 部 件 的 逻辑 结构 ,评审 部 件 的 可 维 
护 性 ; 

(3) 评价 质量 模型 : 通过 度量 元 对 整个 应 用 源 代码 进行 度量 ,并 作出 Kiviat 图 显示 分 
析 结 果 ,对 可 维护 性 作出 评判 。 

Logiscope Audit 采用 的 是 包括 软件 质量 标准 化 组 织 制 定 的 ISO 9126 模型 在 内 的 质量 
模型 ,该 模型 是 一 个 3 层 的 结构 组 织 ,包括 : 

(1) 质量 因素 ; 

(2) 质量 准则 ; 

(3) 质量 度量 元 。 

质量 因素 是 从 用 户 角 度 出 发 ,对 软件 的 质量 特性 进行 总 体 评估 ;质量 准则 从 软件 设计 者 
角度 出 发 ,设计 为 保障 质量 因素 所 必须 遵循 的 法 则 ;质量 度量 元 从 软件 测试 者 角度 出 发 , 验 
证 是 否 遵循 质量 准则 。 一 个 质量 因素 由 一 组 质量 准则 来 评估 ,一 个 质量 准则 由 一 组 质量 度 
量 元 来 验证 。 

Logiscope Audit 将 软件 与 所 选 的 质量 模型 进行 比较 ,生成 软件 质量 分 析 报 告 。 内 容 
包括 : 

(1) 质量 报告 ,Logiscope 根据 质量 模型 ,生成 相应 的 软件 质量 分 析 报告 ; 

(2) 质量 度量 元 ,可 清楚 分 析 和 观察 每 个 类 或 方法 中 的 质量 度量 元 的 数值 ,判断 其 是 否 
合法 

(3) 质量 准则 ,可 清楚 分 析 和 判断 各 质量 因素 所 含有 的 质量 准则 的 数值 和 合格 性 ; 

(4) 质量 因素 ,针对 系统 层 、 类 层 和 函数 层 , 分 别 分 析 质 量 因素 的 合格 性 和 所 占 百分比 ; 

(5) 程序 流程 图 ,控制 流 图 显示 算法 的 逻辑 路 径 。 其 图 形 表示 适用 于 评价 函数 的 复 
杂 性 ; 

(6) 程序 调用 图 ,调用 图 显示 过 程 和 函数 之 间 的 关系 ,非常 适用 于 检查 应 用 系统 的 
设计 ; 

(7) Kiviat 图 ,Kiviat 图 使 质量 等 级 与 所 选择 的 参考 之 间 的 一 致 性 对 比 更 加 可 视 化 。 

通过 对 软件 质量 进行 评估 及 生成 控制 流 图 和 调用 图 发现 最 可 能 发 生 错 误 的 部 分 ,然后 
使 用 度量 元 及 控制 流 图 .调用 图 等 手段 做 进一步 分 析 。 

3) Logiscope TestChecker 

Logiscope TestChecker 可 以 测试 覆盖 分 析 ,显示 没有 测试 的 代码 路 径 , 作 出 基于 源码 
结构 分 析 。 该 工具 直接 反馈 测试 效率 和 测试 进度 ,协助 进行 训 退 测试 ; 既 可 在 主机 上 测试 ， 
也 可 在 目标 板 上 测试 :支持 不 同 的 实时 操作 系统 :支持 多 线程 :可 累积 合并 多 次 测试 结果 , 自 
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动 鉴别 低 效 测试 和 训 退 测试 。 该 工具 提供 指令 覆盖 、 判 定 覆盖 `MC/DC( 条 件 组 合 覆 盖 ) 和 
基于 应 用 级 的 PPP 覆盖 。 分 析 这 些 覆 盖 率 信息 可 以 提高 测试 效率 ,协助 进行 进一步 测试 。 
同时 ,Logiscope 支持 对 艇 入 式 系统 的 覆盖 率 分 析 。 

为 保证 测试 的 有 效 性 ,必须 定义 准则 和 策略 以 判断 何 时 结束 测试 。 准 则 必须 是 客观 和 
可 量化 的 元 素 。 根 据 应 用 的 准则 和 项 目 相关 的 约束 ,可 以 定义 使 用 的 度量 方法 和 要 达到 的 
覆盖 率 , 度 量 测试 的 有 效 性 。 

TestChecker 产生 每 个 测试 的 测试 覆盖 信息 和 累计 信息 ,并 能 够 根据 测试 运行 情况 显 
示 新 的 测试 所 反映 的 测试 覆盖 情况 。 被 执行 过 的 函数 ,一 旦 作 了 修改 需要 重新 运行 时 ， 
Logiscope 将 会 标 出 。 测 试 时 首先 要 执行 的 测试 是 功能 性 测试 ,目的 是 检查 所 期 望 的 功能 
是 否 已 实现 。 在 测试 初期 ,测试 覆盖 比率 会 迅速 增加 ,一 般 能 达到 70% 的 覆盖 率 。 但 是 ,要 
提高 此 比率 是 十 分 困难 的 ,主要 是 由 于 测试 覆盖 了 相同 的 测试 路 径 。 在 该 阶段 需要 对 测试 
策略 做 一 些 改变 ,应 当 执 行 结构 化 测试 , 即 要 检测 没有 执行 的 逻辑 路 径 , 定 义 适当 的 测试 覆 
盖 这 些 路 径 。 在 测试 执行 期 间 , 当 测 试 策略 改变 时 ,可 综合 运用 TestChecker 和 
RuleChecker 帮助 用 户 分 析 未 测试 的 代码 。 用 户 可 以 显示 所 关心 的 代码 ,并 通过 对 执行 未 
覆盖 路 径 的 观察 得 到 有 关 的 信息 。 信 息 以 图 形 ( 控 制 流 图 ) 和 文本 ( 伪 代 码 和 源 文 件 ) 的 形式 
提交 ,并 在 其 间 建 立 导航 关联 。 

Logiscope 支持 嵌入 式 软件 测试 。 众 所 周知 ,内 入 式 软件 测试 与 非 嵌入 式 软件 测试 相 
比 要 困难 一 些 , 因 为 嵌入 式 软件 开发 是 用 交叉 编译 方式 进行 的 ,在 目标 机 (target) 上 ,不 可 
能 有 多 余 的 空间 记录 测试 的 信息 ,必须 实时 地 将 测试 信息 通过 网 线 / 串 口传 到 宿主 机 (host) 
上 ,并 实时 在 线 显示 。 因 此 ,对 源 代 码 的 插 柱 和 目标 机 上 的 信息 收集 与 回 传 成 为 问题 的 关 
键 。Logiscope 很 好 地 解决 了 这 些 技术 ,成 为 嵌入 式 软件 测试 工具 的 佼佼 者 。 


3. 产品 应 用 

Logiscope 支持 VxWorks .pSOS 、VRTX 等 实时 操作 系统 。 目 前 ,Logiscope 产品 在 全 
世界 26 个 国家 的 众多 国际 知名 企业 中 得 到 了 广泛 的 应 用 ,其 用 户 涉及 通信 电子、 航空 、 国 
防 ,汽车 .运输 ,能 源 及 工业 过 程控 制 等 众多 领域 。 


11.2.2 PRQA 


1. 工具 概述 

PRQA 公司 成 立 于 1986 年 ,总 部 在 英国 。PRQA 被 世界 范围 内 的 高 级 软件 开发 人 员 、 
行业 专家 标准 团体 认可 为 编程 标准 专家 ,一 直 致力 于 通过 静态 分 析 来 自动 化 地 检查 编程 标 
准 的 遵循 并 发 现 软件 的 缺陷 。PRQA 的 主要 业务 是 代码 完整 性 管理 系统 的 开发 ,保证 软件 
质量 ,提供 相关 的 自动 化 测试 /管理 工具 .提供 专业 的 咨询 和 培训 业务 。 其 产品 以 及 服务 广 
泛 应 用 于 汽车 .电子 商务 .医疗 器 械 、 生 产 和 通信 等 领域 。 

PRQA 的 主要 产品 包括 : QAC/QAC++ ,QA. MISRA C/QA. MISRA C++ 。 

QAC/QAC++ 是 一 个 完全 自动 化 的 代码 静态 分 析 工 具 , 可 以 提供 编码 规则 检查 、 代 码 
质量 度量 .软件 结构 分 析 等 功能 .QAC/QAC++ 以 其 能 全 面 而 准确 地 发 现 软 件 中 存在 的 潜 
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在 问题 的 能 力 得 到 客户 的 广泛 认可 。 本 书 重点 介绍 QAC。 

QAC 是 一 个 基于 C 语言 开发 环境 下 用 以 提高 软件 产品 产量 和 质量 标准 的 深层 次 静态 
分 析 工 具 软 件 。 这 个 软件 可 以 自动 识别 C 语言 源 代码 中 出 现 的 问题 。 这 些 问题 主要 是 由 
于 语言 使 用 过 程 不 安全 .过 于 复杂 无 法 移植 ,难以 维护 或 与 该 行业 的 代码 标准 偏离 造成 的 。 
QAC 能 够 对 许多 编译 器 或 其 他 工具 开发 软件 无 法 说 明 的 问题 提出 警告 。 该 工具 可 以 极 大 
地 缩减 代码 检测 的 时 间 并 能 同时 加 强 程 序 设 计 人 员 对 C 语言 中 不 完全 为 人 理解 的 某 些 特 
点 的 认 知 。 利 用 QAC ,能 够 在 软件 开发 的 早期 阶段 发 现 和 解决 存在 的 问题 隐患 ,从 而 提高 
代码 质量 ,缩短 测试 周期 ,达到 双赢 的 效果 。 该 工具 具有 以 下 特点 。 

(1) 提供 深层 次 的 静态 分 析 。 工 具 不 但 能 够 迅速 有 效 地 检测 出 语言 运用 中 的 错误 \ 已 
过 时 用 法 ,程序 标准 一 致 性 等 问题 ,从 而 防止 在 软件 开发 后 期 以 更 昂贵 的 代价 去 解决 问题 ， 
而 且 还 能 将 工业 标准 分 析 度 量 标 准 和 通俗 易 懂 的 报告 结合 在 一 起 。 

(2) 规则 可 以 定制 。 对 于 数据 库 中 已 有 的 规则 ,可 以 由 测试 人 员 决 定 使 用 哪 项 规则 或 
不 使 用 哪 项 规则 ,或 者 是 某 一 个 错误 等 级 的 规则 。 对 于 特殊 行业 来 讲 , 如 果 数 据 库 中 没有 所 
要 求 的 规则 ,也 可 以 人 工 定制 , 即 通 过 QAC 提供 的 定制 方法 来 添加 想 要 的 规则 。 

(3) 可 以 和 开发 工具 集成 。 可 以 和 Visual Studio v6. 0、Visual Studio . NET .Tornado 
集成 ,在 开发 环境 中 使 用 QAC ,提高 测试 效率 。 


2. 产品 功能 

QAC/QAC++ 的 主要 功能 包括 以 下 6 个 方面 。 

(1) 代码 自动 审查 。QAC/QAC t++ 能 够 对 CVC++ 代码 规则 进行 自动 检查 ,报告 所 违反 
的 编程 标准 和 准则 ,减少 代码 审查 所 需 的 时 间 ,使 软件 工程 师 在 开发 阶段 就 可 以 避免 代码 中 
的 问题 ,提高 代码 的 质量 ,缩短 后 期 动态 测试 的 周期 。 

(2) 科学 的 质量 度量 。QAC/QAC++ 提供 权威 的 度量 指标 分 析 能 力 , 包 括 60 多 种 C 
语言 度量 和 20 多 种 C++ 度量 ,为 不 同 成 熟 度 企业 的 软件 质量 改进 提供 客观 准确 的 依据 。 

(3) 全 面 的 规范 支持 。QAC/QAC ++ 全 面 支持 多 种 最 新 编程 标准 (ISO、MISRA-0: 
2004、MISRA-C++ : 2008 JSF EC++ 等 ), 及 多 种 其 他 行业 编程 规则 。QAC/QAC++ 能 够 
发 现 1500 多 种 C 语言 问题 .800 多 种 C++ 的 问题 ,并 提供 方便 的 二 次 开发 接口 ,可 以 让 软 
件 质量 工程 师 定制 符合 部 门 要 求 的 规范 。 

(4) 灵活 的 测试 管理 。QAC/QAC ++ 能 够 对 全 生命 周期 的 测试 过 程 提供 代码 质量 管 
理解 决 方案 ,通过 QAVerify 插件 .开发 经 理 可 以 随时 通过 网 页 监控 项 目 质量 趋势 .跟踪 缺 
陷 状 态 .定义 复合 度量 、. 对 比分 析 质 量 .定制 生成 质量 报告 .并 和 Baseline 插件 一 起 ,进行 测 
试 的 版 本 管理 和 控制 。 

(5) 强大 的 结构 分 析 能 力 。QAC/QAC++ 能 够 在 功能 模块 文件 引用 、 函 数 调用 、 代 码 
控制 流 等 不 同 层次 ,进行 软件 结构 分 析 和 诊断 。 通 过 Structurel01 插件 ,软件 设计 工程 师 可 
以 在 集成 阶段 更 好 地 理解 软件 架构 .解析 依赖 关系 、 裁 汰 元 余 代码 。 

(6) 丰富 的 工具 集成 。QAC/QAC++ 可 以 被 非常 方便 地 集成 到 各 种 IDE 中 ,开发 工程 
师 在 熟悉 的 环境 中 就 可 以 进行 代码 审查 .例如 MS VC++ 、Tornado、Source Insight、GCC、 
Keil C.C++ Builder、Eclipse、.CodeWarrior、Rhapsody 等 。QAC 提供 了 强大 的 CLI 接口， 
可 以 方便 地 实现 自动 化 测试 脚本 。 通 过 所 提供 的 插件 包 和 配置 生成 器 .测试 工程 师 可 以 快 
速 地 搭建 起 各 种 嵌入 式 平台 下 的 测试 环境 ;并 能 够 和 业界 领先 的 动态 测试 工具 
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VectorCAST 集成 在 一 起 .实现 强 强 联合 ,构成 静 动态 一 体 化 测试 环境 。 人 


3. 产品 应 用 

该 产品 目前 支持 的 语言 有 C、C++ 、Java & Fortrano; 目 前 可 支持 的 平台 有 Microsoft 
Windows, Sun Solaris, HP-UX. Redhat Linux,Slackware Linux。 

对 于 编译 器 ,QAC 支持 几乎 所 有 的 主流 编译 器 , QAC 在 分 析 代 码 时 ,并 不 对 代码 进行 
编译 ,只 是 分 析 程 序 运 行 时 要 用 到 的 一 些 编 译 器 信息 ,如 编译 器 头 文件 、 宏 等 ,以 及 幅 入 式 的 
CPU 设 定 等 。 目 前 支持 的 编译 器 有 : Borland C/C++ Builder、Cosmic、Diab、Edison Design 
Group\GNU C/C++ ,Green Hills C/C++ \IAR.\IBM VisualAge C++ 、Intel、Keil、Metrowerks 、 
Microsoft C/C++ 、Tasking 等 。 

该 产品 具有 以 下 优点 : 

(1) 缩减 软件 开发 的 成 本 和 产品 上 市 的 时 间 ; 

(2) 降低 软件 产品 质量 问题 ; 

(3) 实现 代码 检测 过 程 自动 化 ,使 软件 开发 和 质量 检验 技术 人 员 提 高 效率 ; 

(4) 在 软件 研发 的 早期 阶段 识别 潜在 的 软件 产品 问题 和 其 他 可 能 出 错 的 问题 ,从 而 减 
少 产品 测试 和 顾客 使 用 中 发 现 问 题 的 概率 ; 

(5) 具有 较 好 的 集成 性 ,能 在 现 有 的 软件 环境 下 实现 安装 和 纯 载 ; 

(6) 自动 检测 软件 产品 是 否 符合 某 公司 或 某 行业 的 软件 标准 和 语言 安全 性 方面 的 
要 求 ; 

(7) 提高 C 语 言 代码 的 编写 质量 ,通过 加 强 软 件 可 靠 性 ,移植 性 和 可 维护 性 3 方面 来 减 
少 软件 产品 未 来 的 维护 费用 ; 

(8) 帮助 软件 开发 人 员 生 产 高 质量 的 代码 ; 

(9) 支持 软件 认证 ,软件 研发 过 程 认 证 和 各 种 质量 认证 ,如 CMM 认证 、ISO 9003/ 
EN29003 ,TickIT IEC 61508、Def Stan 00-55.DO-178B 等 ; 

(10) 设立 了 软件 质量 度量 标准 ,后 期 代码 修改 可 以 得 到 衡量 和 上 比较; 

(11) 为 软件 开发 的 成 本 和 产量 提供 依据 ; 

(12) 帮助 软件 开发 相关 人 员 在 利用 C 语言 编程 过 程 中 避免 问题 。 


11.2.3 SpyGlass 


1. 概述 

SpyGlass 是 由 Atrenta 公司 开发 的 EDA 软件 ,可 以 用 来 对 可 编程 光 辑 器 件 软件 进行 
编码 规则 检查 和 跨 时 钟 域 分 析 。SpyGlass 能 够 覆盖 主流 的 编码 规则 集 , 是 目前 FPGA、 
ASIC 开发 领域 中 编码 规则 覆盖 最 广泛 的 工具 之 一 。 


2. 功能 

1) 编码 规则 检查 

进行 编码 规则 检查 时 ,SpyGlass 软件 通过 分 析 RTL 代码 ,检查 代码 的 编写 模式 、 规 范 、 
风格 ,将 扫描 结果 与 相应 的 规则 库 进 行 匹配 . 如 出 现 违反 相应 规则 的 情况 , 则 根据 严重 等 级 
予以 标识 。 主 要 功能 如 下 : 
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(1) 支持 SPARC Lint\、More Lint、SpyGlass、Sec、OpenMore 等 主流 规则 集 ; 

(2) 覆盖 Do-254 规范 中 编码 相关 规则 的 要 求 ; 

(3) 用 户 可 以 根据 需要 选择 所 要 使 用 的 规则 集 ,并 可 以 从 各 个 规则 集中 抽取 特定 的 规 
则 形成 自 定义 的 规则 集 ; 

(4) 根据 违反 规则 的 类 型 和 程度 确定 问题 等 级 ,分 别 为 Error、Warning 和 Information 
等 级 ,便于 用 户 有 侧重 点 地 排查 和 分 析 问 题 ; 

(5) 针对 违规 代码 模块 ,给 出 影响 分 析 和 修改 建议 ,便于 用 户 进行 问题 的 定位 和 分 析 ; 

(6) 能 够 以 图 形 化 的 方式 表示 RTL 代码 生成 的 电路 模型 ; 

(7) 统计 分 析 各 个 设计 模块 的 编码 违规 情况 ; 

(8) 支持 VHDL、Verilog、System Verilog 等 主流 设计 语言 ,并 支持 对 混合 语言 设计 的 
编码 规则 检查 。 

2) 跨 时 钟 域 分 析 

进行 跨 时 钟 域 (CDC) 分 析 时 ,通过 扫描 RTL 设计 代码 或 综合 后 的 设计 模型 ,抽取 设计 
中 存在 的 各 种 时 钟 信号 ,并 将 其 转化 为 时 钟 树 。 然 后 根据 开发 人 员 提 供 的 时 钟 约束 和 时 钟 
关联 信息 ,分 析 各 个 时 钟 信号 的 约束 和 时 钟 是 否 正确 ,时 钟 信号 的 传递 和 时 钟 是 否 违规 , 存 
在 多 个 时 钟 信 号 的 设计 模块 的 时 钟 信号 同步 是 否 正确 等 。 主 要 功能 如 下 : 

(1) 分 析 和 抽取 设计 中 存在 的 时 钟 信号 ,辅助 建立 完整 的 时 钟 约束 ; 

(2) 抽取 设计 的 时 钟 、 复 位 及 1/O 信号 之 间 的 关系 ,验证 测试 人 员 提 供 的 各 种 约束 信息 
是 否 完整 有 效 , 测 试 人 员 可 以 依据 扫描 的 结果 对 约束 文件 进行 修改 和 补充 ; 

(3) 检查 设计 约束 的 完整 性 和 正确 性 ; 

(4) 对 开发 人 员 提 供 的 RTL 设计 进行 预 综合 .根据 约束 文件 对 设计 的 时 钟 和 复位 是 否 
存在 毛刺 .竞争 等 设计 风险 进行 检查 ; 

(5) 根据 约束 文件 对 设计 的 跨 时 钟 域 结构 进行 抽取 并 验证 所 涉及 的 信号 是 否 进 行 了 正 
确 有 效 的 同步 化 处 理 ; 

(6) 抽取 的 正确 跨 时 钟 域 结构 ,使 用 自 带 的 仿真 引擎 进行 形式 化 功能 验证 ,检查 各 个 跨 
时 钟 域 结 构 在 正确 同步 的 基础 上 是 否 满足 实际 的 功能 需要 ; 

(7) 以 图 形 化 的 方式 给 出 存在 跨 时 钟 域 问 题 的 电路 结构 ,违规 模块 在 整个 设计 中 所 处 
的 位 置 ,标注 存在 跨 时 钟 域 问题 的 各 个 时 钟 节 点 .时 钟 传递 路 径 等 信息 ,便于 设计 人 员 进 行 
问题 追踪 和 排查 ; 

(8) 根据 潜在 的 跨 时 钟 域 风险 大 小 ,给 出 问题 严重 等 级 ,并 提供 规范 的 修改 建议 ; 

(9) 检查 复位 信号 的 正确 性 ,及 各 个 模块 对 复位 信号 的 相应 机 制 是 否 合理 ; 

(10) 支持 Verilog、VHDL、System Verilog 等 主流 设计 语言 及 其 混合 设计 ; 

(11) 生成 跨 时 钟 域 分 析 报告 :报告 给 出 存在 跨 时 钟 域 风险 的 各 个 设计 模块 的 具体 信 
息 , 包 含 错误 等 级 .风险 类 型 .时钟 信 息 、 代 码 行 、. 原 因 等 信息 。 


3. 产品 应 用 
SpyGlass 能 够 很 方便 地 执行 大 规模 复杂 FPGA 设计 的 编码 规则 检查 和 器 时 钟 域 分 析 
工作 ,具有 分 析 效率 高 、 错 误 信息 漏 报 误 报 率 低 的 优势 。 
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11.2.4 PrimeTime 


1. 概述 

PrimeTime 是 Synopsys 公司 推出 的 一 款 用 于 对 可 编程 收 辑 器 件 和 ASIC 电路 进行 静 
态 时 序 分 析 的 软件 ,该 软件 运行 于 Linux/Solaries 环境 下 ,是 目前 应 用 比较 广泛 的 静态 时 序 
分 析 工 具 。 


2. 功能 

PrimeTime 主要 完成 对 以 下 内 容 的 分 析 : 

(1) 建立 和 保持 时 间 的 检查 (setup and hold checks); 

(2) 时 钟 脉冲 宽度 的 检查 ; 

(3) 时 钟 门 的 检查 (clock-gating checks); 

(4) 复位 信号 recovery 时 间 和 removal 时 间 检 查 ; 

(5) 无 时 钟 信 号 输入 的 时 序 器 件 的 检查 (unclocked registers); 
(6) 未 约束 的 时 序 端 点 (unconstrained timing endpoints); 

(7) 多 时 钟 输入 的 时 序 器 件 的 检查 (moultiple clocked registers); 
(8) 组 合 反 馈 回 路 识别 与 分 析 (combinational feedback loops); 
(9) 基于 设计 规则 的 检查 ,包括 对 最 大 电容 .最 大 传输 时 间 .最 大 扇 出 的 检查 ， 
(10) 最 大 延迟 路 径 的 时 序 余 量 分 析 ; 

(11) 时 钟 偏 移 的 影响 分 析 与 评估 ; 

(12) 不 同 工 况 下 时 钟 余 量 分 析 。 


3. 产品 应 用 

PrimeTime 采取 穷尽 的 方法 提取 整个 FPGA 设计 的 时 序 电 路 ,通过 计算 信和 号 在 各 个 路 
径 上 的 传播 延迟 ,对 最 大 延迟 和 最 短路 径 进 行 分 析 , 计 算 时 序 余 量 , 检 查 设计 中 是 否 存在 违 
背 时 序 约束 的 错误 。PrimeTime 能 够 快速 高 效 地 对 大 规模 FPGA 设计 进行 时 序 分 析 , 极 大 
地 节省 时 序 仿 真 的 开销 .提高 开发 和 验证 效率 。 


11.2.5 Formalpro 


1. 概述 

Formalpro 是 一 个 形式 化 验证 工具 ,用 于 检查 两 个 设计 (或 对 等 实体 ) 在 多 辑 功 能 上 的 
是 否 等 价 , 是 一 款 常用 的 多 辑 等 效 性 检查 工具 。 浊 辑 等 效 性 检查 是 验证 两 个 设计 在 多 辑 上 
是 否 等 价 的 技术 。 该 技术 可 以 验证 RTL、 综 合 后 网 表 、 门 级 网 表 、 布 局 布线 后 的 网 表 在 迪 辑 
上 是 否 等 价 。 


2. 功能 

Formalpro 通过 完整 提取 设计 中 不 同 层次 的 参考 点 ,参照 名 称 和 接口 匹配 这 些 参考 点 ， 
验证 不 同 层次 的 设计 是 否 保持 逻辑 上 的 一 致 性 。 该 工具 的 主要 功能 如 下 : 

(1) 支持 多 种 主流 RTL 语言 .如 VHDL、Verilog、System Verilog 等 主流 设计 语言 , 作 
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为 验证 端 输入 ; 

(2) 支持 渐进 式 的 设计 验证 ,验证 过 程 中 仅 重 新 编译 更 动 后 的 代码 ,提高 验证 效率 ; 

(3) 验证 过 程 中 的 任何 时 间 点 均 可 暂停 和 开始 ; 

(4) 辅助 验证 人 员 手 工 编写 匹配 文件 ,支持 正则 表达 式 匹配 方法 ; 

(5) 支持 图 形 界面 和 命令 行 界面 ; 

(6) 以 图 形 化 的 方式 完整 显示 被 验证 的 两 个 设计 的 电路 模型 ,高 亮 显示 不 匹配 的 电路 
结构 .RTL 代码 等 信息 ; 

(7) 明确 表示 不 匹配 点 ,以 图 形 化 方式 标注 不 匹配 的 参考 点 ,便于 错误 定位 和 双向 
追踪 ; 

(8) 支持 调试 工作 模式 ,便于 验证 人 员 更 加 直接 地 判定 匹配 情况 ,并 动态 调整 匹配 
文件 ; 

(9) 能 够 给 出 完整 的 匹配 报告 ,详细 给 出 匹配 情况 和 分 析 结 果 。 


3. 产品 应 用 

Formalpro 能 够 帮助 设计 者 很 快 地 检测 出 设计 中 的 错误 并 将 之 隔离 ,大 大 缩短 验证 所 
需要 的 时 间 。 比 如 ,开发 人 员 在 对 RTL 代码 级 别 的 设计 进行 了 充分 功能 仿真 后 ,只 需 使 用 
多 辑 等 效 性 检查 技术 验证 综合 后 的 网 表 文 件 或 布局 布线 后 的 网 表 文 件 与 RTL 代码 在 逻辑 
上 是 否 等 价 即 可 ,从 而 保证 FPGA 设计 功能 验证 的 充分 性 ,节省 了 进行 门 级 仿真 .时 序 仿真 
耗费 的 大 量 时 间 。 


11.2.6 其 他 静态 测试 工具 


其 他 静态 测试 工具 有 : 

(1) McCabe 公司 的 McCabe IQ, 支 持 CC++ 、Java、Ada、Visual Basic 和 . NET, 用 于 
静态 结构 分 析 、 代 码 复 杂 度 和 覆盖 率 分 析 , 包含 McCabe Test、McCabe QA、McCabe 
Reengineering 等 组 件 ; 

(2) Gimpel 公司 的 PC-LINT, 支 持 CC++; 

(3) PolySpace 公司 的 PolySpace, 支 持 C、C++、Ada, 能 够 进行 代码 静态 分 析 。 


11.3 动态 测试 工具 


11.3.1 QACenter 


1. 工具 概述 

QACenter 用 于 帮助 测试 人 员 创 建 一 个 快速 、 可 重用 的 测试 过 程 ,该 工具 自动 帮助 管理 
测试 过 程 , 快 速 分 析 和 调试 程序 .针对 回归 、 强 度 、 单 元 、 并 发 .集成 .移植 .容量 和 负载 建立 测 
试用 例 , 自 动 执行 测试 和 产生 文档 结果 。 


2. 产品 功能 
QACenter 主要 包括 以 下 5 个 模块 。 
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1) 功能 测试 工具 QARun 

在 QACenter 测试 产品 套件 中 ,QARun 主要 用 于 客户 /服务 器 应 用 客户 端的 功能 测试 。 
在 功能 测试 中 主要 包括 对 应 用 的 GUI( 图 形 用 户 界 面 ) 的 测试 及 客户 端 事物 逻辑 的 测试 。 
现在 RAD( 快 速 应 用 开发 ) 方 式 开发 的 应 用 ,由 于 开发 的 速度 比较 快 ,可 支持 对 用 户 多 变 的 
需求 不 断 调 整 应 用 ,所 以 要 求 对 软件 要 有 更 严格 的 测试 。 由 于 不 断 变化 的 需求 将 导致 应 用 
不 同 版 本 的 产生 ,每 一 个 版 本 都 需要 测试 ,每 一 个 被 调整 的 内 容 往往 最 容易 隐 含 错误 ,所 以 
回归 测试 是 测试 中 最 重要 的 阶段 ,而 回归 测试 通过 手工 方式 是 很 难 达到 的 ,工具 在 这 方面 可 
以 大 大 地 提高 测试 效率 ,使 测试 更 具 完 整 性 。 

QARun 的 测试 实现 方式 是 通过 鼠标 移动 .键盘 点 击 操作 被 测 软 件 , 得 到 相应 的 测试 脚 
本 ,对 该 脚本 可 以 进行 编辑 和 调试 。 在 记录 的 过 程 中 可 针对 被 测 软件 中 所 包含 的 功能 点 进 
行 基线 值 的 建立 , 换 句 话说 就 是 在 插入 检查 点 的 同时 建立 期 望 值 。 在 这 里 检查 点 是 目标 系 
统 的 一 个 特殊 方面 在 一 特定 点 的 期 望 状态 。 通 常 .检查 点 在 QARun 提示 目标 系统 执行 一 
系列 事件 之 后 被 执行 。 检 查 点 用 于 确定 实际 结果 与 期 望 结果 是 否 相同 。 

2) 性 能 测试 工具 QALoad 

QALoad 是 企业 范围 的 负载 测试 工具 ,该 工具 支持 的 范围 广 、 测 试 内 容 多 ,可 以 帮助 软 
件 测试 人 员 、 开 发 人 员 和 系统 管理 人 员 对 分 布 式 的 应 用 执行 有 效 的 负载 测试 。 负 载 测试 能 
够 模拟 大 批量 用 户 的 活动 ,从 而 发 现 大 量 用 户 负载 下 对 C/S 系统 的 影响 。 

3) 应 用 可 用 性 管理 工具 EcoTools 

在 性 能 测试 完成 之 后 ,需要 对 可 用 性 状况 如 何 实施 分 析 。 很 多 因素 能 够 影响 应 用 的 可 
用 性 。 用 户 的 桌面 网络、 应 用 的 服务 器 ,数据库 环境 和 它们 的 各 种 各 样 的 子 组 件 都 链接 在 
一 起 ,任何 一 个 组 件 都 可 能 引起 整个 应 用 对 最 终 用 户 的 不 可 用 。 

EcoTools 能 够 解决 应 用 可 用 性 中 计划 ,管理 ,监控 和 报告 的 问题 ,该 工具 能 够 立即 在 测 
试 或 生产 环境 中 激活 .计划 和 管理 以 商务 为 中 心 的 应 用 的 可 用 性 ,能 够 支持 一 些 主流 成 型 的 
应 用 ,如 SAP、PeopleSoft、Baan、Oracle .UNIFACE、LotusNotes 以 及 其 他 定制 的 应 用 。 

EcoTools 有 数 百 个 Agents 可 以 监控 服务 器 资源 ,能 够 监控 Windows、UNIX、Oracle、 
Sybase、 SQL Server 等 。 通 过 使 用 QALoad 与 EcoTools ,可 以 在 系统 生成 一 个 负载 ,同时 监 
控 资 源 的 利用 问题 。QALoad 是 一 个 极 好 的 性 能 测试 工具 ,但 不 承担 诊断 问题 的 工作 ,而 
QALoad 与 EcoTools 集成 则 为 所 有 加 载 测试 提供 全 面 的 解决 方案 。QALoad 与 EcoTools 
集成 允许 在 图 形 中 查看 EcoTools 资源 利用 数据 ,可 以 使 用 QALoad 的 分 析 组 件 创建 。 

4) 应 用 性 能 优化 工具 EcoScope 

EcoScope 是 一 套 定 位 于 应 用 及 其 所 依赖 的 所 有 网 络 计算 资源 的 解决 方案 。EcoScope 
可 以 提供 应 用 视图 ,并 标 出 应 用 是 如 何 与 基础 架构 相关 联 的 。 这 种 视图 是 其 他 网 络 管理 工 
有 具 所 不 能 提供 的 。EcoScope 能 解决 在 大 型 企业 复杂 环境 下 分 析 与 测量 应 用 性 能 的 难题 。 
通过 提供 应 用 的 性 能 级 别 及 其 支撑 架构 的 信息 .EcoScope 能 帮助 相关 部 门 就 如 何 提高 应 用 
性 能 提出 多 方面 的 决策 方案 。 该 工具 的 主要 特点 如 下 。 

(1) 贯穿 整个 应 用 生命 周期 的 性 能 分 析 。EcoScope 使 用 综合 软件 探测 技术 无 干扰 地 
监控 网 络 ,可 自动 发 现 应 用 、 跟 踪 在 LAN/WAN 上 的 应 用 流量 .采集 详细 的 性 能 指标 。 
EcoScope 将 这 些 信息 关联 到 一 个 交互 式 用 户 界 面 (Interactive Viewer) 中 ,自动 识别 低 性 能 
的 应 用 、 受 影响 的 服务 器 与 用 户 、 性 能 低下 的 程度 。Interactive Viewer 允许 用 户 以 一 种 智 
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能 方式 访问 大 量 的 EcoScope 数据 ,能 很 快 地 找到 性 能 问题 的 根源 ,并 在 几 小 时 内 解决 令 人 
烦恼 的 性 能 问题 。 另 外 ,EcoScope 的 长 期 数据 采集 能 使 我 们 通过 预先 趋势 分 析 和 策略 规划 
预测 到 未 来 的 问题 。 

(2) 确保 成 功 部 署 新 应 用 。EcoScope 允许 使 用 从 运行 网 络 中 采集 到 的 实际 数据 来 创 
建 一 个 测试 环境 。 利 用 此 环境 ,可 以 在 不 影响 其 他 应 用 的 情况 下 ,测量 新 应 用 在 已 存 架 构 中 
的 适应 性 ( 即 网 络 能 力 ) ,还 可 测量 出 与 网 络 共享 资源 的 可 交互 性 。EcoScope 能 揭示 性 能 问 
题 ,如 低 伸 缩 性 或 瓶颈 ,能 调整 应 用 和 定位 基础 架构 上 的 缺陷 。 一 旦 性 能 得 到 了 提高 ， 
EcoScope 可 以 重新 评估 ,验证 应 用 是 否 达到 了 预期 目的 。 这 些 指标 数据 可 用 来 作为 部 署 应 
用 的 基准 ,以 确保 达到 预期 目标 。 

(3) 维护 性 能 的 服务 水 平 。EcoScope 性 能 评分 卡 能 很 容易 地 显示 出 关键 应 用 每 时 每 
刻 是 如 何 运行 的 ,以 及 它们 是 否 达 到 了 预期 的 服务 水 平 。 对 于 必须 满足 服务 水 平 协议 
(SLAs) 的 应 用 ,EcoScope 能 为 之 设置 性 能 要 求 , 并 监控 是 否 有 偏离 。 如 果 一 个 应 用 超出 了 
性 能 的 上 下 限 ,EcoScope 将 认为 服务 水 平 异常 ,并 根据 受 影 响 用 户 的 数量 和 性 能 降低 的 时 
间 长 短 细 分 问题 的 严重 程度 。 这 些 信息 使 IT 维护 人 员 能 优先 关注 对 业务 影响 最 大 的 应 用 
问题 。EcoScope 性 能 评分 卡 以 图 形 方式 按时 间 周 期 显示 响应 时 间 和 流量 ,以 及 受 应 用 影响 
的 关键 服务 器 和 最 终 用 户 。 在 评分 卡 中 .能 通过 比较 和 关联 这 些 信息 ,确定 应 用 使 用 量 、 响 
应 时 间 、 特 定 的 最 终 用 户 和 服务 器 之 间 的 因果 关系 。 在 业务 被 阻碍 前 ,跟踪 每 天 的 变化 趋 
势 , 控 制 性 能 波动 ,快速 找 出 性 能 瓶颈 。EcoScope 一 旦 发 现 性 能 低下 的 应 用 ,将 提供 详细 信 
息 来 隔离 造成 瓶颈 的 来 源 。EcoScope 图 形 化 界面 使 用 户 交 互 地 观察 单个 受 影 响 的 工作 站 、 
服务 器 及 网 段 。EcoScope 提供 的 大 量 信息 有 助 于 进行 问题 根源 的 分 析 ,确定 问题 扩散 的 原 
因 、 受 影响 的 服务 器 和 用 户 及 其 性 能 受 损 是 否 有 共性 。EcoScope 对 瓶颈 的 分 析 不 限于 网 络 
基础 架构 和 资源 ,还 包括 其 他 关键 计算 资源 ,如 桌面 和 服务 器 。 

(4) 加 速 问题 检测 与 纠正 的 高 级 功能 。 完 善 的 EcoScope 技术 被 动 地 监视 网 络 , 能 
收集 到 关于 应 用 与 协议 的 独特 信息 ,不 只 包括 IP 与 IPX 流量 ,可 以 更 好 地 分 析 与 排除 
应 用 的 性 能 问题 。EcoScope 可 自动 发 现 几 百 种 打包 的 内 部 应 用 ,如 SAP/R3、MS 
Exchange、Oracle.SNA LU2 与 LU6.2、Web、IPX/SPX 和 UNIX NOS。 不 像 其 他 产品 
需要 预先 配置 才能 识别 应 用 ,EcoScope 跟踪 LAN/WAN 架构 中 的 应 用 流量 ,并 显示 出 
应 用 使 用 的 流量 最 大 的 路 径 及 某 个 服务 器 的 特定 路 径 。EcoScope 通过 收集 3 类 指标 
数据 提供 应 用 性 能 的 完全 视图 : 会 话 层 响 应 时 间 、 业 务 交易 响应 时 间 和 应 用 流量 。 
EcoScope 的 内 路 智能 技术 可 识别 组 成 业务 交易 的 Oracle 与 SQLServer 谓词 的 不 同 独特 
标志 ,并 跟踪 其 响应 时 间 。 

(5) 定制 视图 有 助 于 高 效 地 分 析 数 据 。EcoScope 将 信息 关联 起 来 并 显示 到 一 个 单一 
的 交互 式 用 户 界面 上 。 这 个 界面 允许 按 应 用 或 用 户 来 灵活 地 创建 定制 的 导 辑 数据 视图 ,能 
以 最 有 效 的 方式 来 分 析 信 息 。 这 就 可 以 用 多 种 视图 显示 来 自 于 跨越 地 理 和 部 门 界限 的 大 企 
业 的 数据 。EcoScope 能 把 历史 信息 导出 到 建 模 和 仿真 工具 ,如 CACI.NetMaker。 这 些 工 
有 具 可 描绘 发 展 趋势 和 模拟 未 来 的 增长 。 这 将 使 用 户 能 明白 未 来 的 瓶颈 在 哪里 ,更 重要 的 是 ， 
什么 时 候 它 将 威胁 应 用 的 服务 水 平 。 

5) TESTBytes 

在 数据 库 开发 的 过 程 中 ,为 了 测试 应 用 程序 对 数据 库 的 访问 ,应 当 在 数据 库 中 生成 测试 
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用 数据 ,我们 可 能 会 发 现 当 数据 库 中 只 有 少量 的 数据 时 程序 可 能 没有 问题 ,但 是 当真 正 投入 
到 运用 中 产生 了 大 量 数据 就 出 现 问 题 了 ,这 往往 是 由 于 程序 的 编写 没有 达到 一 些 功能 ,所 以 
一 定 及 早 地 通过 在 数据 库 中 生成 大 量 数据 来 帮助 开发 人 员 尽 快 完善 这 部 分 功能 和 性 能 。 但 
是 如 何 生成 大 量 测试 数据 呢 ? 长 期 以 来 这 些 工作 是 靠 手 工 来 完成 的 ,要 占用 有 经 验 的 开发 
和 测试 人 员 大 量 宝贵 时 间 。TESTBytes 是 一 个 用 于 自动 生成 测试 数据 的 强大 易 用 的 工具 ， 
通过 简单 的 单 击 式 操作 ,就 可 以 确定 需要 生成 的 数据 类 型 (包括 特殊 字符 的 定制 ), 并 通过 与 
数据 库 的 连接 来 自动 生成 数 百 万 行 的 正确 的 测试 数据 ,可 以 极 大 地 提高 数据 库 开 发 人 员 、 测 
试 人 员 ,数据 仓库 开发 人 员 ,应 用 开发 人 员 的 工作 效率 。 


3. 产品 应 用 

QACenter 应 用 十 分 广泛 ,支持 DB2,DCOM,ODBC,ORACLE,NETLoad,Corba,QARun， 
SAP,SQLServer,Sybase,Telnet ,TUXEDO, UNIFACE, WinSock, WWW 等 。 

该 产品 操作 简便 。 以 QALoad 为 例 , 测 试 人 员 只 需 操作 被 测 应 用 ,执行 性 能 关键 的 事 
务 处 理 , 然 后 在 QALoad 脚本 中 通过 服务 器 上 应 用 调用 的 需求 类 型 开发 这 些 事务 处 理 。 
QALoad 的 测试 脚本 开发 由 捕获 会 话 、 转 换 捕获 会 话 到 脚本 以 及 修改 和 编译 脚本 等 一 系列 
的 过 程 组 成 。 一 旦 脚本 编译 通过 后 ,使 用 QALoad 把 脚本 分 配 至 测试 环境 中 相应 的 机 器 
上 ,可 模拟 大 量 用 户 的 并 发 操作 ,实施 应 用 负载 测试 ,从 而 减少 了 以 往 大 量 的 人 工 工作 ,节省 
了 时 间 , 提 高 了 效率 。 


11.3.2 WinRunner 


1. 工具 概述 

Mercury Interactive 公司 的 WinRunner 工具 是 一 种 企业 级 的 功能 测试 工具 ,用 于 检测 
应 用 程序 是 否 能 够 达到 预期 的 功能 及 正常 运行 。 由 于 C/S 结构 的 软件 功能 增加 越 来 越 快 ， 
QA 部 门 测试 难度 越 来 越 大 ,手工 测试 已 经 跟 不 上 这 种 发 展 趋势 。WinRunner 可 以 帮助 测 
试 人 员 自 动 处 理 从 测试 开发 到 测试 执行 的 整个 过 程 。 测 试 人 员 可 以 创建 可 修改 和 可 复 用 的 
测试 脚本 ,而 不 用 担心 软件 功能 模块 的 变更 ,只 需要 让 计算 机 自动 执行 这 些 脚本 ,就 能 轻 而 
易 举 地 发 现 软件 中 的 错误 ,从 而 确保 软件 的 质量 。 

在 软件 操作 中 单 击 GUI( 图 形 用 户 界面 ) 对 象 时 ,WinRunner 会 用 一 种 类 C 的 测试 脚本 
语言 (TSL) 生成 一 个 测试 脚本 ,测试 人 员 可 以 用 手工 编程 的 方法 编辑 这 个 脚本 。 
WinRunner 的 功能 生成 器 (function generator) 可 以 帮助 测试 人 员 快 速 简便 地 在 已 录制 的 
测试 中 添加 功能 。WinRunner 包括 两 种 录制 测试 的 模式 。 

(1) 环境 判断 模式 。 这 种 模式 根据 测试 人 员 选 取 的 GUI 对 象 (如 窗 体 ` 清 单 .按钮 等 
把 对 软件 的 操作 动作 录制 下 来 ,并 忽略 这 些 对 象 在 屏幕 上 的 物理 位 置 。 每 一 次 对 被 测 软 件 
进行 操作 ,测试 脚本 中 的 脚本 语言 会 描述 测试 人 员 选 取 的 对 象 和 操作 动作 。 录 制 时 间 时 ， 
WinRunner 会 对 测试 人 员 选 取 的 每 个 对 象 做 唯一 描述 并 写 入 GUI map (映射 ) 中 。GUI 
map 和 测试 脚本 被 分 开 保 存 维护 。 软 件 用 户 界 面 发 生变 化 时 ,测试 人 员 只 需 更 新 GUI 
map。 这 样 一 来 ,环境 感应 模式 的 测试 脚本 将 非常 容易 地 被 重复 使 用 。 执 行 测试 只 需要 回 
放 测 试 脚本 。WinRunner 能 够 模拟 一 个 用 户 使 用 鼠标 选取 对 象 . 用 键盘 输入 数据 , 它 从 
GUI map 中 读 取 对 象 描述 .并 在 被 测 软件 中 查找 符合 这 些 描 述 的 对 象 ,可 以 在 同一 个 窗 体 
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中 找到 这 些 对 象 ,即使 它们 的 位 管 发 生 过 变化 。 

(2) 模拟 模式 。 这 种 模式 能 够 记录 鼠标 点 击 、 键 盘 输 入 和 鼠标 在 二 维 平面 上 (x 轴 和 y 
轴 ) 的 精确 运动 轨迹 。 执 行 测试 时 .WinRunner 让 鼠标 根据 轨迹 运动 。 这 种 模式 对 于 那些 
需要 追踪 鼠标 运动 的 测试 非常 有 用 .例如 画图 软件 。 


2. 产品 功能 

WinRunner 将 测试 过 程 分 6 个 步骤 。 

(1) 创建 GUI map。 使 用 RapidTest Script Wizard( 快 速 测试 脚本 向 导 ) 回 顾 软 件 用 户 
界面 ,并 系统 地 把 每 个 GUI 对 象 的 描述 添加 到 GUI map 中 。 也 可 以 在 录制 测试 的 时 候 , 通 
过 单 击 对 象 把 对 单个 对 象 的 描述 添加 到 GUI map 中 。 

(2) 创建 测试 。 通 过 录制 、 编 程 的 方式 创建 测试 脚本 。 录 制 测试 时 ,在 需要 检查 软件 反应 
的 地 方 插入 检查 点 来 检查 GUI 对 象 .位 图 (bitmap) 和 数据 库 。 在 这 个 过 程 中 , WinRunner 捕捉 
数据 ,并 作为 期 望 结果 储存 下 来 。 

(3) 调试 测试 。 测 试 人 员 可 以 先 在 调试 模式 下 运行 脚本 ,也 可 以 设置 中 断 点 ,监测 变 
量 ,控制 WinRunner 识别 和 隔离 错误 。 调 试 结果 能 够 保存 下 来 ,一 旦 调试 结束 就 可 以 删除 。 

(4) 执行 测试 。 测 试 人 员 在 检验 模式 下 测试 被 测 软 件 。WinRunner 在 脚本 运行 中 过 到 
检查 点 后 ,就 把 当前 数据 和 前 期 捕 提 的 期 望 值 进行 比较 ,发 现 不 符合 的 情况 就 记录 下 来 。 

(5) 查看 测试 结果 。 每 次 测试 结束 , WinRunner 会 把 结果 显示 在 报告 中 。 报 告 会 详 述 
测试 执行 过 程 中 发 生 的 所 有 主要 事件 ,如 检查 点 、 错 误 信息 .系统 信息 或 用 户 信息 。 如 果 在 
检查 点 发 现 问题 ,测试 人 员 可 以 在 测试 结果 窗口 查看 预期 结果 和 实测 结果 。 如 果 是 位 图 不 

合 , 也 可 以 查看 用 于 显示 预期 值 和 实测 结果 之 间 差 异 的 位 图 。 

(6) 报告 发 现 的 错误 。 如 果 由 于 测试 中 发 现 错误 而 造成 测试 运行 失败 ,测试 人 员 可 以 

直接 从 测试 结果 窗口 报告 错误 信息 。 


3. 产品 应 用 

企业 级 应 用 (包括 Web 应 用 系统 .ERP 系统 .CRM 系统 等 ) 在 发 布 之 前 ,升级 之 后 的 版 
本 都 要 经 过 测试 ,确保 所 有 功能 都 能 正常 运行 。 如 何 有 效 地 测试 不 断 升级 更 新 且 不 同 环境 
的 应 用 系统 ,是 每 个 公司 都 会 面临 的 问题 。 人 工 测 试 的 工作 量 大 ,还 要 额外 的 时 间 来 培训 新 
的 测试 人 员 ,如 果 时 间或 资源 有 限 , 这 个 问题 会 更 加 琅 手 。 为 了 确保 那些 复杂 的 企业 级 应 用 
在 不 同 环境 下 都 能 正常 可 靠 地 运行 ,需要 一 个 能 简单 操作 的 测试 工具 来 自动 完成 应 用 程序 
的 功能 性 测试 。 通 过 自动 录制 ,检测 和 回放 用 户 的 应 用 操作 ,WinRunner 能 够 有 效 地 帮助 
测试 人 员 对 复杂 的 企业 级 应 用 的 不 同 版 本 进行 测试 ,提高 测试 人 员 的 工作 效率 和 质量 ,确保 
跨 平台 的 、 复 杂 的 企业 级 应 用 无 故障 发 布 及 长 期 稳定 运行 。 


11.3:3 JUnit 


1. 工具 概述 

目前 的 最 流行 的 单元 测试 工具 是 xUnit 系列 框架 ,根据 语言 不 同 分 为 JUnit (java)、 
CppUnit(C ++ ) .DUnit (Delphi) ,NUnit(. net) .PhpUnit(Php) 等 。 该 测试 框架 的 第 一 个 和 
最 杰出 的 应 用 就 是 由 Erich Gamma 和 Kent Beck 提供 的 开放 源 代码 的 JUnit。JUnit 是 一 
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个 开发 源 代码 的 Java 测试 框架 ,用 于 编写 和 和 运行 可 重复 的 测试 。 它 是 用 于 单元 测试 框架 体 
系 xUnit 的 一 个 实例 (用 于 Java 语言 ) ,主要 用 于 白 盒 测试 .回归 测试 。 


2. 产品 功能 

JUnit 是 为 Java 程序 开发 者 实现 单元 测试 的 一 个 框架 ,能 使 Java 单元 测试 更 规范 有 
效 , 并 且 更 有 利于 测试 的 集成 。 

1) TestCase 测试 类 

JUnit 框架 中 通过 TestCase 实现 单元 测试 ,TestCase 继承 了 Assert 类 ,也 就 是 说 在 
TestCase 类 以 及 子 类 中 可 以 直接 使 用 JUnit 框架 所 提供 的 断言 。 另 外 , TestCase 实现 了 
Test 接口 , Test 接口 的 run 方 法 将 会 运行 一 个 测试 ,并 返回 结果 。 

如 果 需 要 使 用 JUnit 做 单元 测试 ,可 以 继承 TestCase, 每 一 个 TestCase 的 子 类 可 以 作 
为 独立 的 测试 用 例 , 从 而 实现 测试 的 目的 。 

2) TestSuite 测试 组 

一 个 TestCase 用 例会 包含 多 个 test 开头 的 测试 函数 ,而 一 个 应 用 中 ,会 包括 若干 个 
TestCase 的 用 例 , 通 常用 户 会 运行 应 用 中 的 所 有 的 测试 ,从 而 确保 应 用 是 可 以 运行 的 。 有 
些 测试 是 非常 耗费 时 间 的 ,如 果 每 次 进行 一 个 小 的 改动 就 运行 所 有 的 测试 ,这 是 很 多 开发 人 
员 不 可 接受 的 ,这 时 就 需要 组 合 一 些 TestCase 用 例 以 及 TestCase 中 的 方法 ,把 测试 分 成 很 
多 的 组 ,每 次 只 针对 特定 的 组 进行 测试 。 

JUnit 框架 提供 了 TestSuite 套件 来 组 合 测试 类 及 测试 方法 , TestSuite 实现 了 
addTestSuite 方法 和 addTest 方法 ,addTestSuite 和 addTest 能 添加 一 个 测试 类 或 另 一 个 
TestSuite 到 当前 组 中 ,通过 这 种 组 合 ,用 户 能 够 把 要 测试 的 用 例 及 方法 分 成 一 个 组 ,最 后 组 
成 一 个 测试 的 套件 。 

3) SetUp 与 TearDown 

通常 每 个 测试 的 运行 都 应 该 是 独立 的 :从 而 就 可 以 在 任何 时 候 : 以 任意 的 顺序 运行 每 个 
单独 的 测试 。 然 而 有 些 时 候 需 要 一 些 全 局 的 环境 变量 设置 ,每 个 测试 用 例 都 可 以 用 到 这 些 
设置 ,而 不 必 每 个 测试 方法 运行 前 都 重新 设 剖 ,这 就 需要 在 测试 用 例 运行 前 使 用 不 同 的 初始 
化 方式 。 

测试 用 例 的 每 一 个 方法 的 执行 都 是 相互 独立 的 ,每 个 test 方法 执行 之 前 ,JUnit 框架 会 
执行 相应 的 初始 化 方法 ,从 而 保证 每 个 test 方法 的 执行 和 其 他 test 方法 之 间 没 有 关系 。 当 
test 方法 执行 后 ,JUnit 框架 也 会 自动 执行 清理 方法 。 测 试 方法 的 初始 化 和 清理 工作 是 通过 
实现 TestCase 子 类 的 SetUp 和 TearDown 方法 完成 的 。 

要 分 清楚 TestCase 和 TestSuite 中 方法 的 执行 顺序 ,初始 化 条 件 , 这 对 设计 测试 项 目 以 
及 程序 的 设计 都 是 非常 重要 的 。 

4) 使 用 Eclipse 进行 单元 测试 

Eclipse 对 JUnit 提供 了 完美 的 支持 ,开发 人 员 可 以 通过 Eclipse 自动 生成 单元 测试 的 
框架 ,并 且 能 够 运行 测试 代码 。 

5) 创建 测试 用 例 

在 Eclipse 中 ,如 果 要 为 某 一 个 被 测试 的 类 创建 一 个 单元 测试 类 ,可 以 选择 新 建 向 导 , 打 
开 新 建文 件 对 话 框 .在 新 建文 件 对 话 框 中 选择 JUnit 下 面 的 "JUnit Test Case” 选 项 ,打开 创 
建 TestCase 的 对 话 框 。 
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在 创建 TestCase 的 对 话 框 中 ,可 以 选择 是 否 创 建 SetUp 和 TearDown 方法 等 ,另外 还 
能 够 选择 为 哪 一 个 类 创建 对 应 的 单元 测试 。 选 择 Next 按钮 ,可 以 为 被 测试 的 类 选择 方法 
加 入 到 单元 测试 中 。 选 择 Finish 按钮 ,Eclipse 将 会 自动 生成 选择 方法 的 相关 定义 。 


3. 产品 应 用 

JUnit 的 优点 主要 有 : 

(1) 可 以 使 测试 代码 与 产品 代码 分 开 ; 

(2) 针对 某 一 个 类 的 测试 代码 通过 较 少 的 改动 便 可 以 应 用 于 另 一 个 类 的 测试 ; 

(3) 易于 集成 到 测试 人 员 的 构建 过 程 中 ,JUnit 和 Ant 的 结合 可 以 实施 增 量 开发 ; 

(4) JUnit 是 公开 源 代码 的 ,可 以 进行 二 次 开发 ; 

(5) 可 以 方便 地 对 JUnit 进行 扩展 。 

随 着 项 目的 进展 ,项 目的 规模 在 不 断 地 膨胀 ,为 了 保证 项 目的 质量 ,有 计划 地 执行 全 面 
的 单元 测试 是 非常 有 必要 的 。 但 单 靠 JUnit 提供 的 测试 套件 很 难 胜任 这 项 工作 ,因为 项 目 
中 单元 测试 类 的 个 数 在 不 停 地 增加 ,测试 套件 却 无 法 动态 地 识别 新 加 入 的 单元 测试 类 ,需要 
手动 修改 测试 套件 ,因此 与 其 他 构建 工具 相 结合 共同 创建 自动 化 单元 测试 方案 成 为 众多 项 
目的 选择 。 


11.3.4 Testbed 


1. 工具 概述 
Testbed 由 LDRA 公司 开发 ,LDRA 公司 是 专业 性 软件 测试 工具 与 测试 技术 、 咨 询 服 
务 提供 者 ,成 立 于 1975 年 ,具有 丰富 的 软件 测试 经 验 , 其 总 部 位 于 英国 利物浦 。 


2. 产品 功能 

LDRA Testbed/TBrun 软件 测试 产品 功能 如 下 。 

1) 静态 分 析 功 能 

(1) 编程 标准 验证 。 编 程 标准 验证 是 高 可 靠 性 软件 开发 不 可 缺少 的 软件 质量 保证 方 
法 ,编程 规则 由 软件 项 目 管理 者 根据 自身 项 目的 特点 ,并 参考 现 有 的 成 熟 的 软件 编程 标准 制 
定 , 如 DERA( 欧 洲 防务 标准 )、MISRA( 汽 车 软件 标准 )。LDRA Testbed 依据 此 规则 搜索 
应 用 程序 ,并 判断 代码 是 否 违反 所 制定 的 编程 规则 。LDRA Testbed 报告 所 有 违反 编程 规 
则 的 代码 ,并 以 文本 方式 或 图 形 反 标注 的 方式 显示 。 测 试 人 员 或 编程 人 员 可 根据 显示 的 信 
息 对 违反 编程 规则 的 代码 进行 修改 。 

(2) 软件 度量 分 析 和 质量 标准 验证 。 对 于 软件 开发 工程 师 、 项 目 负 责 人 及 高 级 管理 者 
来 说 ,软件 质量 的 管理 与 监控 是 非常 困难 且 费 时 的 。LDRA Testbed 很 好 地 解决 了 这 一 问 
题 , 使 得 管理 者 很 容易 收集 正在 开发 的 软件 系统 的 相关 信息 并 判断 软件 是 否 满足 软件 质量 
标准 要 求 , 从 而 达到 对 软件 项 目的 质量 跟踪 与 控制 ,用 户 可 基于 现行 软件 标准 自行 定义 适合 
本 系统 或 项 目的 软件 质量 模型 。LDRA Testbed 支持 下 列 主要 软件 度量 元 分 析 : 控制 流 节 
点 度量 (control flow knots) .LCSAJ 密度 度量 (LCSAJ density)、 扇 人 / 扇 出 度量 .循环 深度 
度量 、McCabe 圈 复 杂 度 .Halstead 软件 科学 度量 、McCabe Essential 复杂 度 .注释 行 度量 、 
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代码 可 达 性 度量 等 。 

(3) 静态 数据 流 分 析 。LDRA Testbed 分 析 软 件 中 全 局 变量 、 局 域 变量 及 过 程 参 数 的 
使 用 状况 ,并 以 图 形 、HTML 或 ASCII 文本 报告 方式 表示 ,清晰 地 识别 出 变量 使 用 引起 的 
软件 错误 ,此 种 方法 既 可 使 用 于 单元 级 , 亦 可 使 用 于 集成 级 .系统 级 。 研 究 结 果 表 明 : 数据 
流 分 析 技 术 是 查找 软件 错误 最 有 效 的 途径 或 方法 之 一 。 

(4) 信息 流 分 析 。 信 息 流 是 在 数据 流 分 析 基 础 上 对 数据 变量 之 间 的 关系 作 进一步 分 
析 ,此 分 析 方 法 已 列 人 高 可 靠 性 软件 测试 标准 ,为 DEF-STAN 00-55 软件 测试 标准 所 采用 。 

2) 动态 分 析 功 能 

(1) 源 代 码 自动 插 桩 。LDRA Testbed 可 自动 对 被 测 软件 进行 代码 插 桩 ,以 获得 被 测 
软件 的 动态 执行 信息 , 供 Testbed 作 动态 测试 分 析 。 被 插 桩 的 代码 可 为 主机 平台 软件 , 亦 可 
为 甬 人 式 目 标 机 平台 。 

(2) 覆盖 率 分 析 。 如 果 在 进行 软件 测试 时 不 对 代码 覆盖 率 进行 监控 ,有 可 能 在 未 被 执 
行 的 代码 中 遗留 软件 错误 ,因此 在 软件 测试 过 程 中 有 效 地 监控 代码 覆盖 率 是 提高 软件 测试 
有 效 性 的 一 项 重要 途径 。LDRA Testbed 可 提供 如 下 代码 覆盖 率 指标 : 语句 覆盖 
Cstatement)、 分 支 / 判 定 覆盖 (branch/decision)、LCSAJ 覆盖 (linear code sequence and 
jump segents)、 过 程 /函数 调用 覆盖 (procedure/function call)、 分 支 条 件 覆 盖 (branch 
condition) 分支 条 件 组合 覆 盖 (branch condition combination )、 修正 条 件 / 判 定 覆 盖 
(modified condition/decision) 动态 数据 流 覆 盖 (dynamic data flow)。 通 过 LDRA Testbed 
对 被 测 软件 进行 代码 覆盖 率 指 标 分 析 , 可 制定 出 相应 的 软件 测试 策略 以 达到 期 望 的 代码 覆 
盖 率 要 求 。 这 将 大 大 提高 对 被 测 软件 (或 代码 ?的 信心 。 

(3) 断言 分 析 。LDRA Testbed 提供 断言 分 析 功 能 ,使 用 此 功能 测试 人 员 可 确认 被 测 
软件 在 动态 测试 过 程 中 是 否 满足 某 特定 状态 或 条 件 。 

(4) 测试 用 例 分 析 。 使 用 此 功能 对 测试 数据 或 用 例 进 行 效率 分 析 , 从 而 可 优化 测试 。 


3. 产品 应 用 

单元 级 软件 测试 已 经 被 公认 为 行 之 有 效 的 软件 测试 方法 ,使 用 单元 级 软件 测试 可 在 软 
件 开发 早期 发 现 软件 故障 或 缺陷 ,从 而 提高 软件 可 靠 性 同时 减少 软件 测试 开销 。 传 统 的 单 
元 级 软件 测试 采用 人 工 方式 编写 测试 驱动 与 桩 模块 ,具有 测试 程序 可 靠 性 低 `. 开 销 大 、 依 赖 
于 测试 人 员 经 验 等 问题 。 同 时 .由 于 大 多 测试 时 间 花 费 在 编写 测试 程序 上 ,测试 人 员 积 极 性 
不 高 ,给 软件 测试 效果 带 来 影响 。 

有 鉴于 此 ,LDRA 公司 成 功 开发 出 单元 级 测试 工具 Testbed/TBrun, 该 工具 功能 全 面 、 
易于 使 用 ,支持 Windows、UNIX、Linux 和 麒麟 等 操作 系统 ,不 仅 适 合 于 主机 平台 软件 测 
试 , 同 时 适合 于 骨 入 式 软件 测试 .已 成 功 地 应 用 于 国内 各 大 研究 机 构 和 软件 测试 部 门 。 使 用 
Testbed/TBrun 可 自动 产生 软件 测试 驱动 . 桩 模块 ,节省 时 间 , 测 试 人 员 可 将 重点 放 在 设计 
测试 用 例 上 ,提高 软件 测试 效率 ,同时 提高 软件 测试 人 员 积 极 性 。LDRA Testbed 产生 的 静 
态 ,动态 结果 均 可 以 图 形 化 显示 .直观 方便 ,支持 的 图 形 化 显示 功能 有 柱状 图 、 流 程 图 、 调 用 
图 、Kiviat 图 。 
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11.3.5 CodeTest 


1. 工具 概述 

CodeTest 是 专 为 嵌入 式 系 统 设计 的 软件 测试 工具 ,CodeTest 为 追踪 舱 入 式 应 用 程序 、 
分 析 软 件 性 能 、 测 试 软件 的 覆盖 率 以 及 内 存 的 动态 分 配 等 提供 了 一 套 实 时 在 线 的 高 效率 解 
决 方案 。CodeTest 还 可 以 通过 网 络 远程 检测 被 测 系统 的 运行 状态 ,可 以 满足 不 同类 型 的 测 
试 环境 ,给 整个 开发 和 测试 团队 带 来 高 品质 的 测试 手段 。CodeTest 可 以 支持 几乎 所 有 的 主 
流 的 嵌入 式 软件 和 硬件 平台 ,可 以 支持 多 种 CPU 类 型 和 艇 入 式 操 作 系 统 。CodeTest 可 支 
持 几 乎 所 有 的 32/64 位 CPU 和 部 分 16 位 MCU ,支持 的 数据 采集 时 钟 频率 高 达 133MHz。 
CodeTest 可 通过 PCI/cPCI/VME 总 线 采 集 测试 数据 ,也 可 通过 MICTOR 插头 ` 飞 线 等 手 
段 对 嵌入 式 系统 进行 在 线 测试 .无需 改动 被 测 系 统 的 设计 .CodeTest 与 被 测 系统 的 连接 方 
式 灵 活 多 样 。 


2. 产品 功能 

CodeTest 包括 以 下 3 个 产品 ,分 别 用 于 艇 入 式 软件 系统 开发 的 不 同 阶段 的 测试 ,可 满 
足 不 同 应 用 的 需求 。 

(1) CodeTest Native。 在 早期 的 开发 阶段 ,采用 CodeTest Native 的 插 桩 器 可 以 实现 较 
快 的 软件 测试 和 分 析 。 虽 然 此 阶段 的 测试 和 分 析 不 是 实时 测试 ,但 这 是 没有 目标 硬件 连接 
时 分 析 和 查找 问题 的 最 好 方法 。 采 用 CodeTest. 可 以 通过 提高 软件 测试 的 代码 覆盖 率 , 查 
找 和 分 析 内 存 的 泄漏 和 深度 追踪 来 确保 软件 的 正常 运行 。 

(2) CodeTest SWIC (software in circuit)。 当 有 硬件 连接 到 测试 系统 时 ,可 以 采用 目 
标 硬件 工具 。 一 般 说 来 .在 这 一 阶段 ,逻辑 分 析 仪 . 仿 真 器 和 纯 软 件 工 具 可 以 用 来 确定 系统 
是 否 正常 工作 ,但 是 采用 这 些 测试 工具 往往 增加 了 工程 师 工 作 的 难度 和 压力 。 而 采用 
CodeTest SWIC, 通 过 目标 代理 来 测试 和 分 析 目 标 硬件 ,无 需 使 用 硬件 工具 。CodeTest 
SWIC 插 桩 器 还 可 以 很 方便 地 让 用 户 从 CodeTest Native 的 desktop-stimulated 测试 跳 转 到 
目标 硬件 的 实时 测试 。 跳 转 后 , 插 桩 器 、 脚 本 的 文件 格式 和 数据 不 受 Native 环境 影响 。 对 
于 大 多 数 开发 者 ,CodeTest 可 以 大 大 节约 开发 的 时 间 。 虽 然 CodeTest SWIC 工具 不 提供 
外 部 硬件 测试 系统 的 细节 情况 ,但 其 为 硬件 测试 难题 提供 了 解决 方案 ,具有 强大 的 代码 覆盖 
分 析 、 内 存 分 析 和 追踪 分 析 功 能 . 且 在 真实 硬件 环境 中 运行 ,价格 低廉 。 

(3) CodeTest HWIC (hardware in circuit) 。 当 进入 此 阶段 时 .会 需要 一 组 能 提供 监视 
软件 测试 深度 和 精确 度 的 工具 链 。CodeTest HWIC 工具 采用 外 部 硬件 辅助 和 相应 的 通信 
系统 来 实现 最 大 程度 的 软件 实时 测试 。 与 多 辑 分 析 仪 和 仿真 器 不 同 ,CodeTest HWIC 具有 
处 理 复杂 财 和 式 系统 的 实时 测试 能 力 。CodeTest 外 管 探测 的 硬件 系统 主要 包括 控制 和 数 
据 处 理 器 、 大 容量 内 存 和 可 编程 的 升级 定时 器 ,因此 大 型 测试 的 时 间 精 度 可 在 士 50ns 内 。 
CodeTest HWIC 除了 提供 测试 代码 覆盖 率 分 析 、 内 存 分 析 和 追踪 分 析 , 其 精确 的 实时 测试 
能 力 还 可 以 帮 你 查 出 软件 性 能 和 质量 上 的 问题 所 在 。 

CodeTest 系统 包括 以 下 4 个 功能 模块 。 

(1) 性 能 分 析 。CodeTest 能 够 同时 对 多 达 128000 个 函数 进行 非 采样 性 测试 ,精确 计 
算出 每 个 函数 或 任务 (基于 RTOS 下 ) 的 执行 时 间或 间隔 ,并 能 够 列 出 其 最 大 和 最 小 的 执行 
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时 间 。CodeTest 的 性 能 分 析 功 能 也 能 够 为 嵌入 式 应 用 程序 的 优化 提供 依据 ,使 软件 工程 师 
可 以 有 针对 性 地 优化 某 些 关键 的 函数 或 模块 ,从 而 改善 整个 软件 的 总 体 性 能 。 

(2) 覆盖 分 析 。CodeTest 提供 程序 总 体 概况 、 函 数 级 代码 以 及 源 级 覆盖 趋势 等 多 种 模 
式 来 观测 软件 的 覆盖 情况 。CodeTest 覆盖 率 信息 包括 程序 实际 执行 的 所 有 内 容 , 而 不 是 采 
样 的 结果 , 它 以 不 同 颜色 区 分 运行 和 未 运行 的 代码 ,CodeTest 可 以 跟踪 超过 一 百 万 个 分 支 
点 ,特别 适用 于 测试 大 型 嵌入 式 软件 。 

(3) 动态 存储 器 分 配 分 析 。CodeTest 能 够 显示 有 多 少 字 节 的 存储 器 被 分 配给 了 程序 
的 哪 一 个 函数 ,统计 出 所 有 的 内 存 的 分 配 情况 ,指出 存储 体 分 配 的 错误 ,让 测试 者 可 以 同时 
看 到 其 对 应 的 源 程序 内 容 。 

(4) 追踪 分 析 。CodeTest 可 以 按 源 程序 、 控 制 流 ,高 级 模式 来 追踪 府 和 人 式 软件 ,最 大 追 
踪 深 度 可 达 150 万 条 源 级 程序 。 其 中 ,高 级 模式 显示 的 是 RTOS 的 事件 和 函数 的 进入 退 
出 ,给 测试 者 一 个 程序 流程 的 大 框图 ;控制 流 追 踪 增加 了 可 执行 函数 中 每 一 条 分 支 语 句 的 显 
示 ; 源 程序 追踪 则 又 增加 了 对 被 执行 的 全 部 语句 的 显示 。 在 以 上 三 种 模式 下 , 均 会 显示 详细 
的 内 存 分 配 情况 ,包括 在 哪个 代码 文件 的 哪 一 行 . 哪 一 个 函数 调用 了 内 存 的 分 配 或 释放 函 
数 , 被 分 配 的 内 存 的 大 小 和 指针 .被 释放 的 内 存 的 指针 ,出 现 的 内 存 错 误 等 。 


3. 产品 应 用 

CodeTest 可 同时 进行 软件 性 能 .代码 覆盖 率 ,动态 内 存 分 配 的 分 析 。 该 工具 套件 非常 
适合 嵌入 式 软件 测试 ,其 测试 具有 很 高 的 可 靠 性 。CodeTest 新 推出 的 VME 能 帮助 软件 开 
发 人 员 集 中 精力 于 软件 代码 设计 ,不 必 费 神 于 硬件 .目标 系统 的 连接 以 及 测试 方案 等 。 
CodeTest-VME 测试 卡 采 用 VME 总 线 连 接 工 业 标准 ,通过 总 线 分 析 器 提取 目标 板 的 详细 
信息 ,支持 所 有 的 CodeTest 功能 ,支持 外 界 电源 .96 脚背 板 连接 方式 . 单 槽 6U .160MM 、 以 
太 网 连接 .AUI 带 适配器 方式 , 板 级 测试 时 可 支持 自 检 , 可 远程 控制 。 

该 产品 目前 支持 CPU: PowerPC、 ColdFire、 ARM.、 x86、MIPS、 DSP (TI、ADI、 
Starcore) 等 ;操作 系统 : VxWorks、AE、OSE、QNX、pSOS,、Chorus、Lynux、 Win CE、Linux、 
有 诅 麟 等; 总线: PCI、cPCI、PMC、VME 等 ;处 理 器 : 29K、68K、ARM .Coldfire、 H8、i960、 
MIPS、MPC8xx、PowerPC、SH、SPARC、X86; 操 作 平台 : Windows 95/NT、UNIX。 


11.3.6 QuestaSim 


1. 概述 

QuestaSim 是 Mentor Graphics 公司 推出 的 用 于 可 编程 逻辑 器 件 仿真 测试 的 工具 ,能 
够 对 被 测 设计 进行 功能 仿真 、 门 级 仿真 和 时 序 仿 真 ,是 目前 应 用 最 为 广泛 的 FPGA 仿真 测 
试 工具 。 


2. 功能 

QustaSim 是 FPGA 仿真 工具 ModelSim 的 升级 版 . 相 比 ModelSim 工具 ,其 在 仿真 性 
能 、 覆 盖 率 、 界 面 优化 .运行 效率 和 稳定 性 等 方面 均 有 较 大 提升 ,主要 功能 和 优点 如 下 : 

(1) 支持 主流 芯片 厂商 如 Altera、Xilinx、Actel 等 的 芯片 类 型 ,并 能 够 与 厂商 提供 的 
EDA 工具 方便 地 集成 ,便于 开发 过 程 中 进行 仿真 验证 和 设计 迁 代 ; 
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(2) 支持 大 规模 FPGA 设计 的 仿真 ,仿真 速度 优 于 其 他 的 仿真 工具 ; 

(3) 能 够 收集 功能 、 条 件 、 分 支 . 语 句 、 条 件 ,、 状 态 机 、 翻 转 、 断 言 等 多 种 类 型 的 覆盖 率 信 
息 , 便 于 评估 仿真 测试 的 充分 性 ,同时 支持 覆盖 率 的 累计 、 合 并 和 未 覆盖 点 的 分 析 , 并 能 够 生 
成 数据 库 、 网 页 或 文本 类 型 的 覆盖 率 统计 信息 ,通过 关联 测试 覆盖 率 和 测试 对 象 ,促进 验证 
进度 跟踪 和 测试 资源 的 高 效 配 置 ， 

(4) 支持 OVM、UVM 等 高 级 验证 方法 学 ; 

(5) 支持 主流 RTL 语言 如 VHDL、Verilog、System Verilog 等 ,支持 混合 语言 设计 的 复 
杂 FPGA 设计 的 仿真 验证 ; 

(6) 能 够 辅助 搭建 测试 平台 的 框架 ,提高 测试 平台 的 编写 效率 ; 

(7) 能 够 支持 复杂 激励 信号 组 合 的 自动 生成 ,激励 情形 以 约束 的 形式 描述 , 极 大 地 缩短 
测试 开发 和 修改 的 次 数 ,提高 测试 设计 的 效率 

(8) 均 有 测试 分 析 能 力 , 将 原始 覆盖 率 数 据 转变 为 可 操作 、 易 识别 的 信息 ,能 够 识别 元 
余 测 试 ,并 基于 测试 项 覆盖 率 判 断 是 否 进 行 优 先 测 试 ; 

(9) 支持 多 种 验证 引擎 ,并 最 大 化 地 发 挥 断言 的 技术 优势 ,有 效 提 升 验证 和 调试 效率 ， 
保证 设计 质量 并 改善 验证 结果 的 可 预测 性 和 可 观测 性 ,便于 查找 错误 的 源头 ,提高 测试 的 
效率 。 


3. 产品 应 用 
QuestaSim 主要 用 于 FPGA 的 功能 仿真 .时 序 仿真 和 门 级 仿真 , 既 可 作为 开发 人 员 的 
设计 调试 工具 ,又 可 作为 验证 人 员 的 验证 辅助 工具 , 极 大 地 提高 设计 和 开发 的 效率 。 


11.3.7 其 他 动态 测试 工具 


其 他 动态 测试 工具 有 : 

(1) Compuware 公司 的 DevPartner, 支持 C++ Java、VisualBasic, 包 含 代码 覆盖 率 分 
析 工 具 TrueCoverage、 代 码 效 率 分 析 工 具 TrueTime 和 内 存 分 析 检 查 工具 BoundsChecker; 

(2) IBM 公司 的 Rational PurifyPlus .支持 Java、C/C++ 、VisualBasic 和 . NET ,包含 代 
码 覆 盖 率 分 析 工 具 pureCoverage、 代 码 效 率 分 析 工 具 pureQuantity 和 内 存 检查 工具 purify 。 


11.4 测试 管理 工具 


11.4.1 TestCenter 


1. 工具 概述 

TestCenter 测试 管理 工具 是 一 款 功 能 强大 的 测试 管理 工具 。TestCenter 采用 面向 需 
求 的 测试 而 不 是 面向 操作 流程 的 测试 。TestCenter 采用 针对 用 户 业 务 流程 的 测试 ,支持 顺 
序 流程 ,同时 支持 工作 流 的 操作 。 使 用 TestCenter, 可 以 实现 测试 用 例 的 过 程 管理 ,对 测试 
需求 过 程 ` 测 试用 例 设 计 过 程 . 业 务 组 件 设 计 实 现 过 程 等 整个 测试 过 程 进 行 管理 ;可 以 实现 
测试 用 例 的 标准 化 : 即 每 个 测试 人 员 都 能 够 理解 并 使 用 标准 化 后 的 测试 用 例 ,降低 了 测试 用 
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例 对 人 的 依赖 。TestCenter 提供 测试 用 例 复 用 ,用 例 和 脚本 都 能 够 被 复 用 ,以 保护 测试 人 
员 的 资产 ;提供 可 伸缩 的 测试 执行 框架 .提供 自动 测试 支持 ;提供 测试 数据 管理 .帮助 用 户 统 
一 管理 测试 数据 ,降低 测试 数据 和 测试 脚本 之 间 的 耦合 度 。 


2. 产品 功能 

TestCenter 是 面向 测试 流程 和 测试 用 例 库 的 测试 管理 工具 ,具有 以 下 功能 。 

(1) 测试 需求 管理 。TestCenter 支持 对 测试 需求 的 全 方位 管理 : 支持 Word、Excel 格 
式 的 测试 需求 导入 ;支持 需求 条 目 化 ;支持 测试 需求 评审 ;支持 测试 需求 与 用 例 的 关联 ;支持 
测试 需求 树 , 树 的 每 个 节点 是 一 个 具体 的 需求 ,也 可 以 定义 子 节点 作为 子 需求 .每 个 需求 节 
点 都 可 以 对 应 到 一 个 或 者 多 个 测试 用 例 。 

(2) 测试 用 例 管理 。 测 试用 例 允许 建立 测试 主题 ,通过 测试 主题 来 过 滤 测 试用 例 的 范 
围 ,实现 有 效 的 测试 。 支 持 手 工 测试 用 例 和 自动 化 测试 用 例 , 支 持 测试 用 例 树 型 结构 。 支 持 
测试 用 例 的 各 种 状态 : 执行 通过 、 未 执行 .执行 失败 ;支持 测试 用 例 关 联 缺 陷 ;支持 测试 关联 
到 需求 。 支 持 执行 中 的 测试 用 例 管理 。 实 现 测试 用 例 的 标准 化 即 每 个 测试 人 员 都 能 够 理解 
并 使 用 标准 化 后 的 测试 用 例 , 降 低 了 测试 用 例 对 个 人 的 依赖 。 

(3) 测试 业务 组 件 管理 。 支 持 软件 测试 用 例 与 业务 组 件 之 间 的 关系 管理 ,通过 测试 业 
务 组 件 和 数据 搭建 测试 用 例 , 实 现 了 测试 用 例 的 高 度 可 配置 和 可 维护 性 。 

(4) 测试 流程 管理 。 管 理 测试 中 的 流程 ,测试 需求 创建 、 测 试 需求 评审 ,测试 计划 、 测 试 
执行 .缺陷 管理 等 流程 。 支 持 测试 计划 管理 ,测试 计划 多 次 执行 ;测试 需求 范围 定义 、 测 试 集 
定义 。 支 持 测试 自动 执行 (通过 调用 测试 工具 ); 支 持 在 测试 出 错 的 情况 下 执行 错误 处 理 脚 
本 ,保证 出 错 后 的 测试 用 例 脚 本 能 够 继续 被 执行 。 

(5) 自动 测试 框架 。 支 持 存 放 自动 测试 脚本 ;支持 不 同类 型 的 自动 测试 工具 ;支持 配置 
化 的 自动 测试 用 例 ;支持 自动 测试 框架 ,支持 测试 执行 中 的 数据 管理 ;支持 自动 测试 日 志 。 
自动 测试 框架 能 够 极 大 地 简化 了 自动 测试 过 程 和 用 例 。 

(6) 测试 结果 日 志 查看 。 具 有 截取 屏幕 的 日 志 查看 功能 。 

(7) 测试 结果 分 析 。TestCenter 中 带 有 功能 强大 而 全 面 的 报表 系统 ,采用 集成 化 的 用 
户 界面 ,每 一 次 测试 对 应 一 个 TestID。TestCenter 报表 的 功能 是 对 测试 过 的 案例 ,返回 一 
个 测试 结果 ,包括 有 正确 返回 (与 预期 相同 ) 与 错误 返回 (与 预期 不 同 ,并 且 同 时 返回 错误 时 
候 的 状态 : 屏幕 画面 \ 设 备 值 等 );TestCenter 的 报表 可 指定 错误 目录 ,生成 测试 报告 ,生成 
异常 错误 数据 和 报告 ;其 统计 功能 包括 有 3 种 测试 状态 (未 测试 成功, 失败) 的 百分比 、 针 对 
测试 案例 的 百分比 :测试 针对 测试 案例 生成 测试 日 志 : 截 取 所 有 的 屏幕 界面 .以 HTML 的 
格式 存放 ,可 以 通过 链接 直接 访问 。 支 持 多 种 统计 图 标 , 比 如 需求 覆盖 率 图 .测试 用 例 完成 
的 比例 分 析 图 .业务 组 件 覆 盖 比 例 图 等 。 

(8) 缺陷 管理 。 提 供 了 最 好 用 的 缺陷 管理 模块 。 支 持 缺 陷 流程 管理 ,用 户 可 以 自 定 义 
缺陷 流程 :支持 缺陷 属性 自 定义 ;支持 自 定 义 的 缺陷 报表 和 缺陷 分 析 。 支 持 从 测试 错误 到 曲 
线 的 自动 添加 与 手工 添加 :支持 自 定义 错误 状态 . 自 定义 工作 流 的 缺陷 管理 过 程 。 

3. 产品 应 用 

该 产品 安装 简单 .使 用 方便 .支持 Windows 操作 系统 和 SQL Server 数据 库 。C/S 版 本 
的 TestCenter 也 可 以 连接 该 公司 自己 研发 的 缺陷 管理 系统 ,与 其 他 同类 工具 相 比 具有 以 下 


软件 测试 实用 方法 与 技术 





特点 : 
(1) 中 文 界面 ,更 容易 使 用 和 理解 ; 
(2) 可 自 定义 工作 流 . 适 应 各 个 公司 的 具体 情况 ; 
(3) 强大 的 报表 分 析 系 统 , 可 根据 用 户 要 求 统计 出 BUG 的 各 种 情况 以 及 各 类 对 比 ; 
(4) 操作 简易 ,使 用 过 滤器 搜索 BUG 简便 。 


11.4.2 TP-Manager 


1. 工具 概述 

TP-Manager 支持 软件 测试 各 个 阶段 的 工作 ,符合 主要 测试 标准 或 规范 的 管理 要 求 , 能 
够 自动 化 实现 软件 测试 过 程 的 规范 化 管理 ,有 效 提高 测试 过 程 管理 的 工作 效率 。 该 工具 具 
备 以 下 特点 : 

(1) 能 够 有 效 规范 测试 流程 ,引导 评测 人 员 严 格 按照 软件 测试 规范 进行 各 阶段 的 测试 
活动 ; 

(2) 通过 底层 数据 库 对 测试 项 目 信 息 .测试 各 阶段 活动 .测试 结果 及 测试 数据 等 信息 进 
行 合理 化 管理 ,保证 了 所 有 信息 的 完整 性 和 一 致 性 ; 

(3) 能 够 自动 进行 测试 信息 的 分 类 统计, 辅助 测试 人 员 对 繁杂 的 测试 设计 及 结果 信息 
进行 合理 化 分 析 ; 

(4) 能 够 自动 化 生成 一 整套 规范 的 软件 测试 文档 ; 

(5) 通过 联网 作业 方式 为 软件 测试 小 组 成 员 创 建 一 体 化 协同 工作 平台 。 

TP-Manager 以 向 导 服 务 方式 引导 测试 人 员 严 格 按 照 软件 测试 各 阶段 的 要 求 开 展 软件 
测试 工作 ,包括 清晰 明确 地 梳理 测试 需求 ,基于 测试 需求 制定 测试 计划 ,按照 测试 计划 设计 
测试 用 例 , 遵 循 测试 用 例 设 计 执 行 软件 测试 ,依据 客观 测试 结果 自动 分 析 归 纳 测试 结论 ;该 
工具 可 以 建立 并 维护 测试 数据 库 , 通 过 联网 作业 方式 为 软件 测试 小 组 成 员 创 建 一 体 化 协同 
工作 平台 ,确保 数据 和 信息 的 完整 性 和 一 致 性 ;该 工具 能 够 自动 进行 测试 信息 的 分 类 ,统计 
和 分 析 , 自 动 生成 规范 化 的 软件 测试 文档 。 


2. 产品 功能 

TP-Manager 提供 一 个 软件 测试 过 程 管 理 向 导 树 ,包括 项 目 基本 信息 管理 、 软 件 测试 需 
求 分 析 ,测试 策划 ,测试 设计 ,测试 执行 测试 总 结 等 多 层次 的 工作 向 导 。 软 件 测试 人 员 只 要 
按照 向 导 树 规定 的 步 又 完成 每 一 步 的 工作 ,就 能 逐 项 落实 软件 测试 的 各 项 管理 要 求 和 技术 
要 求 。TP-Manager 主 界面 如 图 11-1 所 示 。 下 面 介绍 该 工具 为 用 户 提供 的 诸多 引导 服务 
功能 。 

1) 软件 测试 项 目 基 本 信息 管理 

工具 提供 软件 测试 项 目 基本 信息 管理 向 导 , 包 括 对 项 目 基本 信息 、 测 试 类 别 、 测 试用 例 
设计 方法 ,软件 问题 类 别 、 软 件 问题 级 别 ,测试 项 的 优先 级 、 问 题 标 识 结 构 等 管理 向 导 。 

为 了 统一 软件 测试 项 目测 试 类 型 的 划分 方法 .工具 为 用 户 提 供 了 定制 软件 测试 类 型 术 
语 的 功能 ,用 户 可 根据 需要 定制 测试 类 型 。 定 制 的 测试 类 型 可 用 于 软件 测试 需求 分 析 ,测试 
策划 阶段 对 测试 对 象 测试 要 求 的 层次 化 分 解 。 如 ,用 户 订 制 测试 类 型 为 功能 测试 、 性 能 测 
试 .接口 测试 .人 机 交互 界面 测试 .安装 性 测试 等 ,定制 了 这 些 类 型 之 后 ,在 软件 测试 需求 分 
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图 11-1 TP-Manager 主 界面 


析 、 测 试 策划 阶段 就 可 以 直接 在 定制 的 测试 类 型 集合 中 选择 这 些 测试 类 型 。 该 功能 具有 两 
个 方面 的 目的 ,一 是 便于 统一 软件 测试 项 目的 测试 类 型 划分 方法 ,二 是 省 略 了 用 户 多 次 输入 
测试 类 型 的 操作 。 

在 软件 测试 实践 中 .存在 着 多 种 软件 测试 用 例 的 设计 方法 ,如 有 效 类 ,无 效 类 、 边 界 值 、 
压力 \ 时 序 、 猜 错 法 等 。 为 了 统一 测试 用 例 设计 方法 ,工具 为 用 户 提 供 了 定制 测试 用 例 设计 
方法 的 功能 ,通过 这 个 功能 统一 定义 测试 项 目的 测试 用 例 设 计 方 法 ,例如 可 把 测试 用 例 设计 
方法 定制 为 有 效 类 ,无效 类 ,边界 值 `. 压 力 ,时 序 或 者 等 价 类 划分 、 错 误 猜 错 法 .边界 值 分 析 法 
等 。 定 制 的 这 些 方法 将 用 于 测试 用 例 设 计 选择 测试 用 例 的 设计 方法 。 

工具 提供 对 于 每 个 测试 项 按照 测试 用 例 设 计 方 法 分 类 统计 功能 ,便于 测试 管理 人 员 分 
析 测 试用 例 设计 的 充分 性 。 

软件 问题 是 指 在 软件 测试 期 间 所 发 现 的 被 测 软 件 存 在 的 问题 ,该 工具 以 软件 问题 报告 
的 形式 提交 被 测 软件 存在 的 问题 。 对 于 软件 问题 的 类 别 和 级 别 , 不 同 的 用 户 有 不 同 的 分 类 、 
分 级 方法 。 工 具 为 用 户 提供 了 软件 问题 类 别 和 软件 问题 级 别 的 定制 功能 ,可 以 为 某 个 测试 
项 目 单独 定制 软件 问题 类 别 和 软件 问题 级 别 , 如 将 软件 问题 的 类 别 定义 为 软件 任务 书 问题 、 
需求 分 析 问题 .软件 设计 问题 .软件 编码 问题 .其 他 问题 等 ,将 软件 问题 的 级 别 定义 为 致命 问 
题 .严重 问 题 一 般 问题 .轻微 问题 等 等 。 

用 户 定制 的 软件 问题 级 别 和 软件 问题 类 别 将 用 于 软件 问题 报告 , 当 测 试 人 员 发 现 被 测 
软件 的 问题 时 .通过 工具 提交 软件 问题 报告 .软件 问题 报告 中 的 问题 级 别 和 问题 类 别 只 能 在 
定制 的 类 别 和 级 别 中 选择 。 如 果 需 要 调整 软件 问题 的 类 别 和 级 别 , 用 户 可 以 在 该 工作 界面 
重新 定制 ,重新 定制 之 后 ,工具 将 自动 并 且 全 部 刷新 所 有 的 问题 报告 中 的 相关 信息 。 

在 《软件 测试 需求 规格 说 明 》 和 《软件 测试 计划 ) 中 ,可 以 为 软件 测试 项 定义 测试 项 的 优 
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先 级 。 不 同 的 用 户 , 甚 至 同一 用 户 对 于 不 同 软件 测试 项 目 存在 着 多 种 软件 测试 项 的 优先 级 
的 表述 方式 ,如 将 优先 级 表示 为 A、B、C 等 级 ,或 者 1.2、3 等 级 等 。 工 具 为 用 户 提供 了 定制 
软件 测试 项 优先 级 表述 方式 的 定制 功能 .用户 可 以 按照 自己 的 规范 进行 自我 定制 。 用 户 定 
制 的 软件 测试 项 优先 级 表述 方式 ,将 用 于 《软件 测试 需求 规格 说 明 》 和 《软件 测试 计划 》 中 测 
试 项 优先 级 的 选择 .对 于 软件 测试 需求 分 析 阶 段 或 软件 测试 策划 阶段 分 解 出 的 测试 项 ,其 优 
先 级 只 能 在 已 经 定制 的 测试 项 优先 级 中 选择 。 如 果 需 要 调整 测试 项 的 优先 级 ,用 户 可 以 在 
该 工作 界面 重新 定制 ,重新 定制 之 后 ,工具 将 自动 并 且 全 部 刷新 所 有 的 测试 项 的 优先 级 。 

软件 问题 报告 中 有 软件 问题 标识 的 栏目 。 不 同 的 用 户 , 甚 至 同一 用 户 对 于 不 同 软件 测 
试 项 目 存在 着 多 种 软件 问题 标识 的 表述 方式 。 工 具 为 用 户 提供 了 定制 软件 问题 标识 表述 方 
式 的 定制 功能 ,用 户 可 以 按照 自己 的 规范 进行 自我 定制 。 工 具 为 用 户 提供 了 最 多 4 个 字段 
的 定制 功能 ,在 每 个 字段 中 .用 户 可 以 定义 多 个 字符 串 。 

用 户 定制 的 软件 问题 标识 表述 方式 .将 用 于 提交 软件 问题 报告 时 生成 软件 问题 标识 。 

工具 自动 对 同一 标识 的 软件 问题 分 类 计数 ,按照 提交 问题 的 先后 顺序 ,给 同一 标识 的 软 
件 问题 自动 编号 。 

2) 软件 测试 需求 分 析 的 向 导 与 管理 

软件 测试 必须 具有 明确 的 测试 依据 。 软 件 测试 依据 可 包括 软件 测试 合同 、 软 件 测试 技 
术 协 议 .软件 测试 任务 书 、 被 测 软 件 的 需求 规格 说 明 ,被 测 软件 的 接口 需求 规格 说 明 、 被 测 软 
件 的 设计 说 明 ( 主 要 用 于 部 件 测试 ) ,被 测 软件 的 用 户 手 册 等 。 

梳理 测试 依据 功能 为 用 户 提供 了 逐 层 分 解 测试 依据 的 工作 界面 ,便于 测试 人 员 清 晰 全 
面 地 梳理 测试 依据 。 测 试 人 员 应 尽 可 能 将 软件 测试 依据 分 解 细 化 ,并 明确 地 描述 测试 依据 
的 出 处 及 其 说 明 , 如 “需求 分 析 中 2.1.1.1 节 的 打印 队列 管理 功能 ”。 

测试 人 员 梳 理 出 来 的 测试 依据 将 用 于 建立 软件 测试 项 与 测试 依据 的 追踪 关系 ,工具 自 
动 查询 软件 测试 项 与 测试 依据 的 追踪 关系 ,建立 测试 依据 与 测试 项 的 追踪 关系 表 ; 如 果 某 项 
测试 依据 没有 被 测试 项 所 追踪 的 话 ,工具 将 自动 给 出 红色 的 报警 提示 。 

3) 软件 测试 策划 阶段 的 向 导 与 管理 

对 于 大 多 数 测试 组 织 来 讲 : 软 件 测试 策划 阶段 是 软件 测试 项 目的 第 一 个 阶段 (工具 支持 
向 导 功能 的 定制 ,可 隐藏 测试 需求 分 析 阶 段 .工具 直接 进入 测试 策划 阶段 ) 。 

软件 测试 策划 的 管理 工作 包括 4 软件 测试 计划 ;文档 基本 信息 管理 .设计 软件 测试 环境 、 
规划 软件 测试 策略 .安排 测试 的 组 织 与 人 员 、 分 析 确 定 被 测 对 象 .针对 每 个 被 测 对 象 分 解 测 
试 项 确定 测试 项 目的 终止 条 件 .输出 《软件 测试 计划 ;文档 等 工作 。 

如 果 软 件 测试 组 织 在 软件 测试 策划 阶段 之 前 已 经 使 用 该 工具 进行 了 软件 测试 需求 分 
析 ,那么 ,在 软件 测试 策划 阶段 将 直接 沿用 需求 分 析 阶 段 所 识别 的 被 测 对 象 . 被 测 软件 概述 
信息 、 针 对 每 个 被 测 对 象 所 定义 的 测试 类 型 和 各 个 测试 项 ,测试 项 目 终止 条 件 等 信息 。 

用 户 在 软件 测试 需求 分 析 阶 段 或 者 在 软件 测试 策划 阶段 对 于 被 测 对 象 .被 测 软件 概述 
信息 、 针 对 每 个 被 测 对 象 所 定义 的 测试 类 型 和 各 个 测试 项 ,测试 项 目 终 止 条 件 等 信息 的 更 
改 , 将 直接 导致 对 (软件 测试 需求 规格 说 明 》 和 《软件 测试 计划 》 的 同步 更 改 , 这 一 功能 有 效 地 
保障 了 《软件 测试 需求 规格 说 明 》 和 《软件 测试 计划 ?的 一 致 性 。 

4) 测试 设计 与 实现 阶段 的 向 导 与 管理 

测试 设计 与 实现 阶段 的 主要 任务 有 两 个 ,一 是 遵循 软件 测试 计划 (或 软件 测试 需求 规格 
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说 明 ) 设 计 软 件 测试 用 例 , 二 是 实现 支持 测试 用 例 所 需 的 测试 软件 或 者 测试 工具 。 该 工具 侧 
重 于 支持 软件 测试 用 例 的 设计 及 其 管理 ,对 于 与 测试 用 例 相 关联 的 测试 软件 .测试 工具 、 输 
入 域 中 的 数据 或 图 片 . 期 望 域 中 的 数据 或 图 片 提 供 了 附件 管理 功能 ,从 而 使 得 软件 测试 用 例 
及 其 相关 附件 紧密 耦合 ,管理 清晰 。 

按照 软件 测试 标准 或 规范 的 基本 要 求 , 测 试用 例 的 设计 必须 遵循 测试 计划 , 即 必 须 在 测 
试 计划 的 框架 下 开展 测试 用 例 的 设计 工作 。 工 具 提供 遵循 软件 测试 计划 设计 测试 用 例 的 功 
能 ,在 软件 测试 策划 时 分 析 定 义 的 被 测 对 象 .测试 类 型 、 测 试 项 都 将 作为 测试 用 例 设计 的 约 
东 性 框架 ,同时 也 是 引导 框架 。 工 具 能 够 确保 被 测 对 象 .测试 类 型 .测试 项 的 完整 性 及 其 层 
次 关系 ,测试 人 员 只 需 在 各 个 软件 测试 项 下 设计 测试 用 例 即 可 。 

5) 测试 执行 阶段 的 向 导 与 管理 

按照 软件 测试 标准 和 规范 的 要 求 , 原 则 上 应 依照 4 软件 测试 说 明 》 中 描述 的 测试 用 例 开 
展 测试 用 例 的 执行 工作 ,在 实际 测试 期 间 , 如 果 需 要 增加 、 删 除 .变更 测试 用 例 , 应 该 得 到 相 
应 的 控制 ,并 且 必 须 保持 测试 说 明 与 测试 记录 的 一 一 映射 关系 。 

在 测试 执行 期 间 , 如 果 某 些 ( 或 某 个 ) 测 试用 例 没 有 完整 执行 或 没有 执行 ,测试 人 员 应 分 
别针 对 每 个 未 完整 执行 (包括 未 执行 ) 的 测试 用 例 说 明 原因 。 

本 工具 支持 软件 测试 标准 和 规范 的 上 述 要 求 ,严格 ,有 序 地 建立 了 测试 说 明 与 测试 记录 
的 一 一 映射 关系 ,实现 了 测试 记录 与 测试 说 明 相同 栏目 的 同步 更 改 , 确 保 了 测试 说 明 与 测试 
记录 的 一 致 性 。 

6) 测试 总 结 阶段 

根据 软件 测试 标准 和 规范 的 要 求 ,必须 基于 客观 翔实 的 软件 测试 记录 进行 软件 测试 总 
结 。 工 具 通 过 对 测试 数据 库 的 查询 ,针对 不 同 的 被 测 对 象 , 用 统计 表 的 形式 分 别 统计 出 测试 
用 例 的 设计 数目 .完整 执行 的 数目 .部 分 执行 的 数目 .未 执行 的 数目 。 

工具 通过 对 测试 数据 库 的 查询 ,针对 不 同 的 被 测 对 象 , 用 统计 报表 的 形式 分 别 给 出 测试 
用 例 的 执行 状态 .执行 结果 、 对 应 的 问题 单 等 信息 。 工 具 的 自动 查询 .统计 功能 ,确保 了 统计 
报表 的 客观 性 和 准确 性 。 在 统计 报表 中 还 提供 了 测试 用 例 的 链接 和 软件 问题 报告 单 的 链接 
功能 , 当 测 试 人 员 需 要 查看 某 个 测试 用 例 、 某 个 软件 问题 报告 单 时 ,可 以 通过 链接 功能 快速 
查阅 。 

工具 通过 对 测试 数据 库 的 查询 .针对 不 同 的 被 测 对 象 , 用 统计 报表 的 形式 分 别 统计 出 未 
完整 执行 (包括 未 执行 ) 的 测试 用 例 . 测 试 人 员 可 在 此 统计 报表 中 填写 未 完整 执行 的 原因 , 当 
用 户 需 要 查看 某 个 测试 用 例 时 ,该 统计 报表 中 还 提供 了 测试 用 例 的 链接 功能 ,便于 测试 人 员 
快速 查看 相应 的 测试 用 例 。 

用 户 提 交 的 测试 相关 信息 均 保存 在 本 测试 项 目的 数据 库 中 ,工具 将 按照 用 户 定制 的 文 
档 模 板 的 格式 要 求 , 自 动 生成 测试 文档 。 


3. 产品 应 用 

该 产品 的 安装 和 运行 需 满足 以 下 要 求 : 计算 机 系统 内 容 大 于 256MB, 可 用 磁盘 空间 大 
于 2GB、Word2003 及 以 上 文字 处 理 系统 、Access2003 及 以 上 数据 库 。TP-Manager 是 在 
. net 的 平台 上 开发 的 ,软件 的 安装 和 运行 需要 . net 2. 0 FrameWork 的 支持 。 如 果 计 算 机 
上 没有 安装 . net, 安 装 程序 将 会 自动 在 计算 机 上 安装 . net FrameWork。 


软件 测试 实用 方法 与 技术 


11.4.3 其 他 测试 工具 


其 他 测试 管理 工具 有 : TestDirector (QualityCenter)、QADirector、 Certify、 Product 
manager,SilkCentral Test Manager、Doors、E-manager、Testmanager、TestView Manager、 
Professional 等 。 

软件 测试 工具 是 实现 软件 测试 技术 的 软件 产品 ,对 于 多 数 软件 测试 来 说 都 是 必 不 可 少 
的 。 本 章 对 常用 的 静态 测试 工具 \ 动 态 测试 工具 和 测试 管理 工具 进行 了 介绍 ,这 些 工 具 对 于 
发 现 软件 缺陷 、 提 高 测试 及 管理 效率 发 挥 了 重要 作用 。 但 是 , 需 认 识 到 ,测试 工具 也 有 自身 
的 局 限 性 ,软件 测试 工具 不 能 取代 手工 测试 .手工 测试 可 以 比 自动 测试 发 现 更 多 的 缺陷 。 日 
前 ,各 种 测试 工具 种 类 繁多 .在 选用 工具 时 应 综合 考虑 工具 的 功能 、 价 格 、 售 后 服务 等 因素 ， 
针对 不 同 开发 语言 .不同 应 用 领域 .在 软件 工程 的 不 同 阶段 选择 合适 的 测试 工具 ,只 有 这 样 
才能 充分 发 挥 测 试 工具 的 作用 ,提高 软件 测试 效率 和 软件 质量 。 


CHAPTER 12 
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不 论 哪 一 种 测试 级 别 ,基本 的 测试 活动 都 包括 : 测试 策划 ,测试 设计 与 实现 ,测试 执行 
和 测试 总 结 。 在 每 个 测试 活动 中 ,都 会 编写 相应 的 软件 测试 文档 ,本 章 将 说 明 测 试 文档 的 内 
容 , 给 出 文档 模板 ,并 说 明 各 文档 的 常见 问题 。 


12.1 概述 


目前 ,在 软件 研制 的 过 程 中 对 软件 测试 的 策划 不 够 重视 ,导致 测试 环境 保障 有 限 、 测 试 
不 充分 等 问题 的 发 生 。 解 决 这 些 问 题 关键 是 提高 对 软件 测试 重要 作用 的 认识 ,并 切实 制定 
和 落实 相关 措施 。 这 些 措 施主 要 包括 以 下 内 容 。 

(1) 尽早 地 开展 测试 策划 工作 。 测 试 策划 的 工作 产品 是 软件 测试 计划 。 由 于 测试 计划 
中 需要 提出 测试 资源 、 人 员 ,测试 环境 和 测试 策略 等 较为 具体 的 要 求 ,因此 有 利于 保证 测试 
资源 、 人 员 ,测试 方法 和 测试 环境 的 有 效 落 实 。 同 时 .测试 计划 对 测试 工作 进入 条 件 ,时间 进 
度 等 都 有 较为 明确 的 要 求 ,也 有 利于 促进 软件 研制 人 员 对 测试 工作 提高 认识 。 

(2) 尽早 地 开展 测试 。 尽 早 地 开始 测试 是 指 在 软件 研制 的 早期 ,例如 需求 分 析 、 设 计 和 
编码 时 就 开始 测试 ,与 开发 人 员 一 起 进行 文档 评审 、 代 码 审 查 、 代 码 走 查 等 。 同 时 ,也 开展 测 
试用 例 的 设计 ,测试 环境 的 建立 以 及 测试 程序 的 开发 等 工作 。 

(3) 大 型 项 目 成 立 独 立 的 测试 组 。 测 试 对 人 员 的 专业 技能 要 求 较 高 ,不 仅 需 要 测试 技 
术 , 也 需要 有 一 定 的 开发 能 力 。 在 许多 软件 研制 机 构 中 ,没有 设置 专门 的 测试 部 门 ,测试 工 
作 由 开发 人 员 自 己 完成 。 由 于 开发 人 员 测 试 自己 开发 的 软件 一 般 都 会 存在 惯性 思维 ,限制 
了 从 不 同 角度 考虑 问题 .使 用 方面 的 测试 也 只 能 按照 自己 的 习惯 。 因 此 ,对 大 型 项 目 来 说 ， 
成 立 独立 的 测试 组 能 够 较 好 地 解决 此 类 问题 。 

(4) 加 强 测试 度量 工作 。 测 试 的 充分 性 如 何 保障 是 测试 需要 面 对 和 解决 的 问题 。 加 强 
测试 度量 工作 可 以 一 定 程 度 上 为 分 析 测试 充分 性 提供 数据 基础 。 与 测试 活动 相关 的 度量 主 
要 包括 软件 源 代 码 规模 ,测试 项 数 .测试 用 例 数 .测试 用 例 执 行 数量 .缺陷 数 、 缺 陷 密度 .不 同 
问题 等 级 数 ,不同 问 题 类 型 数 .测试 工作 量 、 问 题 被 发 现 的 阶段 和 测试 覆盖 率 等 。 通 过 对 这 
些 基 本 测量 数据 的 分 析 , 可 以 获得 对 软件 质量 、 测 试 工作 情况 的 基本 分 析 结 果 , 对 进一步 提 
高 软件 质量 和 测试 工作 效率 都 是 非常 有 意义 的 。 

(5) 深入 开展 缺陷 分 析 工 作 。 深 入 开展 缺陷 分 析 对 软件 开发 和 测试 都 可 以 起 到 促进 作 
用 。 建 立 基本 的 缺陷 数据 库 , 收 集 与 缺陷 相关 的 信息 对 缺陷 分 析 至 关 重 要 。 与 缺陷 相关 的 
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信息 包括 缺陷 描述 、 级 别 、 类 型 .缺陷 引入 活动 ,与 之 相关 的 需求 ,与 之 相关 的 测试 用 例 、 软 件 
名 称 、 测 试 类 型 测试 执行 时 间 、 负 责 人 、 缺 陷 是 否 更 动 . 缺 陷 更 动 内 容 等 。 通 过 对 上 述 信息 
的 分 析 ,可 以 发 现 软件 研发 过 程 中 哪些 活动 最 容易 出 现 问题 ,测试 应 重点 关注 的 内 容 等 。 

上 面 这 些 措施 的 落实 和 体现 形式 就 是 软件 测试 文档 ,通过 按照 要 求 执行 测试 活动 ,编写 
测试 文档 可 以 反映 项 目 是 否 按 要 求 执行 各 种 测试 活动 ,进而 有 效 地 控制 测试 过 程 , 保 证 测试 
活动 的 有 效 性 和 充分 性 。 


12.2 制定 测试 计划 


软件 测试 计划 是 开展 软件 测试 工作 的 基础 。 因 此 ,应 在 软件 研制 初期 就 应 制定 项 层 的 
软件 测试 计划 ,主要 是 提出 测试 策略 、 测 试 人 员 、 测 试 资源 ,测试 通过 准则 和 测试 进度 安排 
等 ,并 随 着 软件 研制 活动 的 逐步 开展 ,逐步 细 化 测试 计划 ,制定 每 个 测试 级 别 的 详细 测试 
计划 。 


12.2.1 测试 计划 内 容 


制定 测试 计划 的 活动 内 容 包 括 以 下 内 容 。 

(1) 按照 测试 依据 和 软件 质量 要 求 确定 软件 测试 的 需求 。 

名 梳理 软件 需求 .明确 需要 测试 的 范围 。 

加 说 明 测试 的 总 体 要 求 .包括 测试 级 别 、 测 试 类 型 ,测试 策略 等 。 

@ 定义 测试 项 ,每 个 测试 项 需要 明确 的 内 容 包 括 : 确定 每 个 测试 项 的 名 称 和 标识 ,说 
明 每 个 测试 项 的 具体 测试 要 求 ,确定 每 个 测试 项 的 测试 方法 ,说明 对 每 个 测试 项 进行 测试 时 
所 需要 的 约束 条 件 ,确定 每 个 测试 项 通过 测试 的 评判 标准 ,提出 对 每 个 测试 项 进行 测试 用 例 
设计 时 所 需要 考虑 的 测试 充分 性 要 求 .规定 完成 每 个 测试 项 测试 的 终止 条 件 、 定 义 每 个 测试 
项 目的 测试 优先 级 ,优先 级 一 般 可 以 根据 依据 文件 中 定义 的 相应 需求 的 优先 级 进行 定义 、 建 
立 每 个 测试 项 与 测试 依据 之 间 的 追踪 关系 。 

@ 制定 测试 策略 ,包括 测试 数据 生成 策略 ,测试 信息 注入 与 捕获 方法 、 测 试 结果 分 析 方 
法 等 。 

(2) 分 析 测 试 环境 需求 ,包括 计算 机 硬件 、 接 口 设备 ,计算 机 操作 系统 、 支 持 软件 、 专 用 
测试 软件 ,测试 工具 和 测试 数据 等 。 

(3) 提出 测试 人 员 安排 。 一 般 情 况 下 ,单元 测试 和 集成 测试 可 由 开发 人 员 完 成 ,配置 项 
测试 ,系统 测试 由 专门 的 测试 人 员 完 成 。 

(4) 安排 测试 的 进度 计划 。 应 依据 软件 研制 进度 、 测 试 需求 ,测试 环境 、 人 员 等 情况 , 制 
定 合理 可 行 的 软件 测试 进度 计划 。 

(5) 制定 测试 通过 的 准则 。 单 元 测试 通过 的 准则 示例 如 下 : 

Q@ 软件 实现 与 设计 文档 一 致 ; 

@ 语句 和 分 支 覆盖 率 达 到 100% ,如果 确实 无 法 覆盖 应 进行 分 析 , 并 说 明 未 覆盖 的 
原因 ; 
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@ 代码 审查 中 强制 类 错误 都 得 到 解决 ; 

@ 单元 测试 发 现 的 问题 得 到 修改 并 通过 回归 测试 ; 

@ 单元 测试 报告 通过 评审 。 

(6) 分 析 测 试 活动 中 可 能 存在 的 风险 .并 制定 相应 的 缓解 和 应 急 计 划 。 


12.2.2 测试 计划 模板 


1 范围 
1.1 标识 
a) 本 文档 标识 : 
b) 标题 : 
c) 本 文档 适用 的 范围 : 
d) 本 文档 的 版 本 号 。 
文档 概述 
被 测 软件 概述 
概述 被 测 软 件 的 下 列 内 容 : 
a) 被 测 软 件 的 名 称 版本、 用途; 
b) 被 测 软件 的 组 成 .功能 \、 性 能 和 接口 ; 
c) 被 测 软 件 的 运行 环境 。 
1.4 与 其 他 文档 的 关系 
2 引用 文档 


ww 


表 2-1 引用 文件 表 


序号 | 引用 文档 标题 | 引用 文档 标识 | 编写 单位 | 出 版 日 期 
3 术语 和 定义 


本 章 给 出 所 有 在 本 文档 中 出 现 的 专用 术语 和 缩 略语 的 确切 定义 。 
表 3-1 术语 和 缩 略 语 表 


序号 术语 和 缩 略语 名 称 术语 和 缩 略 语 说 明 


4 测试 内 容 与 方法 
4.1 测试 总 体 要 求 
根据 被 测 软 件 研制 要 求 或 系统 研制 要 求 、 软 件 需 求 规格 说 明 及 其 他 等 效 文档 ,结合 被 
测 软 件 的 级 别 及 其 质量 要 求 ,提出 测试 的 范围 .测试 级 别 、 测 试 类 型 .测试 策略 等 总 体 要 求 。 
测试 级 别 分 为 : 单元 测试 、 集 成 测试 .配置 项 测试 和 系统 测试 。 集 成 测试 可 分 为 : 








配置 项 集成 和 系统 集成 。 











化 多 及 ”软件 测试 实用 方法 与 技术 





X (被 测 对 象 ) 


心 心 心 心 


Fo mA 


测试 项 及 测试 方法 


.X.Y (被 测 对 象 的 测试 类 型 ) 
.X.Y.Z (被 测 对 象 的 测试 项 ) 





测试 项 名 称 


测试 项 标识 





测试 项 说 明 





测试 方法 





约束 条 件 





评判 标准 





测试 充分 性 要 求 
测试 项 终止 条 件 
优先 级 





序号 问题 类 别名 称 





4.3 软件 问题 类 别 及 严重 性 等 级 


表 4-1 问题 类 别 表 
问题 类 别 说 明 











序号 问题 级 别名 称 





1 程序 错误 运行 程序 与 相应 的 文档 不 一 致 ,而 文档 是 正确 的 

2 文档 错误 运行 程序 与 相应 的 文档 不 一 致 ,而 程序 是 正确 的 

3 设计 错误 虽然 运行 程序 与 相应 的 文档 一 致 ,但 是 存在 设计 缺陷 ,可 能 产生 错误 
a 其 他 错误 非 程序 错 误 .文档 错误 .设计 错误 的 错误 类 别 


表 4-2 问题 严重 性 等 级 
问题 级 别 说 明 





(1) 有 碍 于 运行 或 任务 的 基本 能 力 的 实现 ; 




















1 级 (2) 危害 安全 性 、 保 密 性 或 其 他 关键 性 要 求 
(1) 对 运行 或 任务 的 基本 能 力 产生 不 利 影响 且 没 有 变通 的 解决 方案 ， 
2 2 级 (2) 对 项 目的 技术 、 费 用、 进度 风险 或 对 系统 寿命 期 的 支持 产生 不 利 
影响 , 且 没有 变通 的 解决 方案 
01) 对 运行 或 任务 的 基本 能 力 产 生 不 利 影响 ,但 存在 变通 的 解决 
方案 ; 
a (2) 对 项 目的 技术 .费用 .进度 风险 或 对 系统 寿命 期 的 支持 产生 不 利 
影响 ,但 存在 变通 的 解决 方案 
5D 给 用 户 /操作 员 带 来 不 便 或 烦恼 ;但 不 影响 运行 或 任务 的 基本 
4 4 级 能 力 ， 


(2) 给 开发 或 支持 人 员 带 来 不 便 , 但 不 妨碍 工作 的 完成 ; 
(3) 任何 其 他 影响 
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5 测试 环境 
5.1 软 硬 件 环境 

对 此 次 测试 所 需 的 软 硬 件 环境 进行 描述 。 

a) 整体 结构 。 描 述 测试 工作 所 需 的 软 硬 件 环境 的 整体 结构 ,例如 需 建立 的 网 络 环 
境 , 还 需 描述 网 络 的 拓扑 结构 和 配置 。 

b) 软 硬 件 资源 。 描 述 测试 工作 所 需 的 系统 软件 、 支 撑 软 件 以 及 测试 工具 等 ,包括 每 
个 软件 项 的 名 称 、 版 本 、 用 途 等 信息 ;描述 测试 工作 所 需 的 计算 机 硬件 .接口 设备 和 固件 
项 等 ,包括 每 个 硬件 设备 的 名 称 、 配 置 、 用 途 等 信息 。 


表 5-1 测试 资源 配置 表 





5.2 测试 场所 

描述 执行 测试 工作 所 需 场 所 的 地 点 \ 面 积 以 及 安全 保密 措施 等 。 
5.3 测试 数据 

描述 测试 工作 所 需 的 真实 或 模拟 数据 ,包括 数据 的 规格 和 数量 等 。 
5.4 环境 差异 影响 分 析 

描述 软 硬 件 环境 及 其 结构 场所、 数据 与 被 测 软 件 研 制 要 求 或 系统 研制 要 求 、 软 件 
需求 规格 说 明 及 其 他 等 效 文 档 要 求 的 软 硬 件 环 境 、 使 用 场所 、 数 据 之 间 的 差异 ,并 分 析 
环境 差异 可 能 对 测试 结果 产生 的 影响 。 
6 测试 进度 

描述 主要 测试 活动 的 时 间 节 点 、 提 交 的 工作 产品 和 人 员 安 排 等 。 

表 6-1 测试 进度 安排 


序号 开始 时 间 | 结束 时 间 | 工作 产品 | ”人 员 





测试 结束 条 件 
描述 测试 结束 的 条 件 , 包 括 正 常 和 异常 结束 的 条 件 。 
8 软件 质量 评价 内 容 和 方法 
描述 基于 此 次 测试 的 软件 质量 评价 内 容 和 评价 方法 。 
9 测试 通过 准则 
描述 被 测 软件 通过 此 次 测试 的 准则 。 例 如 : 可 能 允许 的 遗留 问题 的 级 别 、 潜 在 缺陷 
密度 等 。 
10 测试 人 员 组 成 


~ 


表 10-1 测试 人 员 组 成 表 
序号 角色 | 姓名 职称 主要 职责 




















EN 
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11 测试 数据 记录 、 整 理 和 分 析 

描述 根据 本 计划 实施 测试 时 ,获得 测试 结果 数据 的 整理 和 分 析 过 程 , 说 明达 到 测试 
目标 的 要 求 和 测试 充分 性 分 析 方法 。 对 未 通过 的 测试 用 例 , 要 特别 说 明 未 通过 的 原因 
和 需要 采取 的 措施 。 
12 测试 风险 分 析 

从 时 间 、 技 术 \ 人 员 、 环 境 、 分 包 、 项 目 管 理 等 方面 对 完成 此 次 测试 的 风险 进行 分 析 ， 
并 提出 应 对 措施 。 
13 追踪 关系 

表 13-1 测试 依据 与 测试 项 的 追踪 关系 表 


- RE 测试 项 名 称 或 
序号 | 测试 依据 标识 | 测试 依据 | 测试 项 标识 | 。 未 追 踪 原 因 说 明 


表 13-2 ”测试 项 与 测试 依据 的 追踪 关系 表 


序号 | 测试 项 标识 | 测试 项 名 称 | 测试 依据 标识 | ”测试 依据 


12.2.3 测试 计划 常见 问题 

















软件 测试 计划 的 制定 需要 与 研制 人 员 、 项 目 管理 人 员 充 分 地 沟通 和 协调 ,保证 测试 
范围 .测试 方法 .测试 资源 和 测试 进度 的 有 效 落 实 。 在 制定 软件 测试 计划 中 常见 的 问题 
如 下 。 

(1) 对 被 测 软件 的 描述 不 完整 。 存 在 缺少 被 测 软件 版 本 .规模 . 关 键 等 级 的 信息 ,运行 
环境 中 缺少 关键 的 硬件 配 团 信 息 和 相关 软件 环境 的 描述 ,接口 描述 不 清晰 等 问题 。 对 被 测 
软件 的 描述 应 包括 : 

加 被 测 软件 的 名 称 ,版 本 规模、 关键 等 级 ; 

@ 运行 环境 应 包括 软 / 硬 件 环境 和 网 络 环境 等 ,如 果 有 数据 库 系 统 还 应 描述 数据 库 系 
统 的 信息 ; 

@ 主要 功能 、 性 能 和 接口 .接口 描述 建议 采用 图 形 化 方式 进行 清晰 地 描述 。 

C2) 引用 文件 描述 不 全 面 。 在 引用 文件 描述 中 缺少 软件 研制 ,测试 所 需要 遵循 的 标准 
和 规范 ,缺少 被 测 软 件 相关 技术 文件 。 引 用 文件 应 包括 : 

@ 软件 开发 和 测试 应 遵循 的 标准 和 规范 ; 

加 被 测 软件 相关 文档 .例如 软件 评测 任务 书 、 软 件 需求 规格 说 明 书 .用 户 手 册 等 ,需要 
根据 测试 级 别 确定 被 测 软件 的 相关 文档 

@ 测试 中 需要 遵循 或 依据 的 文件 .例如 通信 协议 .与 测试 活动 相关 的 会 议 纪要 等 。 

(3) 测试 总 体 要 求 中 提出 的 测试 类 型 不 全 面 .与 测试 任务 要 求 的 不 一 致 ,未 说 明 测 试 仿 
真 环境 的 总 体 设计 要 求 等 。 
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(4) 测试 项 定义 的 不 完整 .不 具体 .主要 体现 在 以 下 两 个 方面 : 

Q@ 对 测试 需求 覆盖 的 不 全 面 .例如 缺少 对 安全 性 需求 的 测试 ,缺少 对 工作 模式 的 测试 ， 
缺少 对 隐 含 需求 的 测试 等 ; 

@ 对 每 个 测试 项 说 明 的 不 具体 .不 完整 ,主要 表现 在 : 测试 项 说 明 不 具体 ,对 需要 测 
试 内 容 描述 不 具体 ,特别 是 性 能 、 精 度 等 有 具体 数值 要 求 的 测试 内 容 没 有 详细 说 明 , 对 评 
估 其 满足 情况 的 允许 偏差 未 进行 说 明 ; 测 试 方法 不 具体 ,主要 表现 在 未 说 明 测 试 数据 的 
注入 方式 ,测试 结果 的 捕获 方法 以 及 测试 结果 分 析 方 法 等 ;测试 方法 不 恰当 ,主要 表现 在 
测试 方法 无 法 满足 测试 要 求 , 例 如 对 毫秒 级 性 能 测试 要 求 , 应 使 用 更 精确 的 测量 方法 进 
行 测试 ;缺少 测试 项 约束 条 件 的 描述 ;缺少 测试 项 评判 标准 的 描述 ,特别 是 性 能 测试 项 的 
评判 标准 、 应 满足 的 误差 要 求 未 进行 具体 说 明 ;测试 充分 性 要 求 不 具体 ,主要 表现 在 未 对 
测试 用 例 设计 充分 性 方面 提出 具体 要 求 ;测试 项 终止 条 件 不 恰当 ,特别 是 容量 、 强 度 等 的 
测试 项 终止 条 件 未 根据 测试 项 的 特点 进行 定义 ;优先 级 未 定义 或 定义 的 不 恰当 ,优先 级 
定义 不 恰当 的 最 突出 表现 是 所 有 测试 项 的 优先 级 都 相同 ;缺少 测试 项 对 测试 依据 之 间 的 
追踪 关系 或 追踪 关系 不 正确 。 

(5) 软 /硬件 环境 描述 不 全 面 ,不 详细 。 测 试 的 软 /硬件 环境 直接 影响 测试 结果 ,因此 需 
要 对 测试 环境 进行 全 面 \ 详 细 地 描述 ,以 便 保证 测试 环境 的 有 效 性 。 存 在 的 问题 主要 表现 
如 下 : 

@ 硬件 环境 不 准确 ,被 测 软 件 的 运行 环境 与 实际 运行 环境 不 一 致 ; 

加 测试 环境 考虑 的 不 全 面 , 例 如 强度 测试 需要 的 测试 环境 要 求 更 高 ,考虑 不 全 面 时 可 
能 造成 强度 测试 无 法 实现 ; 

@ 测试 所 需 软件 的 要 求 不 具体 ,例如 对 测试 程序 所 需要 实现 的 功能 、 性 能 未 提出 要 求 ， 
影响 测试 用 例 的 实现 ; 

@ 硬件 环境 的 配置 ,测试 软件 的 版 本 等 信息 未 进行 说 明 。 

(6) 测试 数据 的 要 求 不 详细 。 测 试 数据 的 准备 情况 影响 测试 的 进度 和 效率 ,因此 需要 
对 测试 数据 的 要 求 尽早 规划 .以便 从 用 户 、 研 制 人 员 等 处 获得 测试 数据 ,保证 测试 的 顺利 
实施 。 

(7) 测试 环境 差异 性 分 析 的 不 充分 。 测 试 环 境 直 接 影响 测试 结果 ,特别 是 性 能 等 测试 ， 
应 进行 充分 地 分 析 ,以 便 保 证 测试 结果 的 可 信 性 。 

(8) 测试 结束 条 件 和 测试 通过 准则 不 具体 ,可 操作 性 不 强 。 测 试 结束 条 件 和 测试 通过 
准则 需要 与 委托 方 进行 充分 沟通 ,获得 具体 .可 操作 、 可 实施 的 测试 结束 条 件 和 测试 通过 
准则 。 


12.3 测试 设计 与 实现 


测试 设计 与 实现 是 测试 过 程 中 关键 的 环节 之 一 。 调 查 显示 ,有 84% 的 被 调查 者 认为 ， 
测试 设计 与 实现 工作 是 对 软件 测试 质量 影响 最 大 的 工作 。 因 此 ,做 好 测试 设计 与 实现 工作 ， 
对 保障 测试 的 充分 性 至 关 重 要 。 
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12.3.1 测试 设计 与 实现 的 内 容 


测试 设计 与 实现 的 主要 工作 是 依据 软件 开发 文档 和 测试 计划 ,进行 测试 用 例 的 设计 ,并 
完成 测试 所 需 的 测试 环境 的 建立 和 验证 。 测 试 设计 与 实现 阶段 完成 时 ,应 编写 软件 测试 说 
明 、 测 试 环境 验证 情况 报告 。 测 试 设计 与 实现 的 内 容 包 括 以 下 内 容 。 

(1) 对 软件 测试 计划 中 定义 的 所 有 测试 项 设计 测试 用 例 , 测 试用 例 说 明 的 要 求 如 下 。 

@ 说 明 测试 用 例 名 称 和 标识 。 

@ 建立 测试 用 例 的 追踪 。 说 明 测 试用 例 所 测试 内 容 的 追踪 关系 ,例如 追踪 到 软件 需求 
规格 说 明 中 的 相关 需求 的 标识 。 

@ 说 明 测试 用 例 综述 。 简 要 描述 测试 目的 和 所 采用 的 测试 方法 。 

@ 提出 测试 用 例 的 初始 化 要 求 。 测 试用 例 初始 化 要 求 包括 硬件 配置 ,软件 配置 (包括 
测试 的 初始 条 件 ) ,测试 配置 (例如 用 于 测试 的 模拟 系统 和 测试 工具 ) ,参数 设置 (例如 测试 开 
始 前 对 初始 化 数据 的 设置 等 的 初始 化 要 求 。 

@ 定义 测试 用 例 的 输入 。 每 个 测试 用 例 输入 的 描述 包括 : 每 个 测试 输入 的 名 称 和 具 
体内 容 , 例 如 确定 的 数值 ,状态 或 信号 等 :测试 输入 的 来 源 , 例 如 测试 程序 产生 信息 、 磁 盘 文 
件 、 通 过 网 络 接收 信息 ` 人 工 键盘 输入 等 :测试 输入 是 真实 的 还 是 模拟 的 ;测试 输入 的 时 间 顺 
序 或 事件 顺序 。 

说 明 测 试用 例 的 期 望 测试 结果 。 期 望 测试 结果 应 有 具体 内 容 , 例 如 确定 的 数值 状 
态 或 信号 等 ,不 应 是 不 确切 的 概念 或 笼统 的 描述 。 必 要 时 ,应 提供 中 间 的 期 望 结果 。 

@ 说 明 测试 用 例 的 测试 结果 评估 准则 。 评 估 准 则 用 以 判断 测试 用 例 执 行 中 产生 的 中 
间或 最 后 结果 是 否 正确 。 评 估 准 则 应 根据 不 同情 况 提供 相关 信息 ,例如 : 实际 测试 结果 所 
需 的 精确 度 ; 允 许 的 实际 测试 结果 与 期 望 结果 之 间 差 异 的 上 、 下 限 ; 时 间 的 最 大 或 最 小 间隔 ; 
事件 数目 的 最 大 或 最 小 值 ;实际 测试 结果 不 确定 时 ,重新 测试 的 条 件 ;与 产生 测试 结果 有 关 
的 出 错 处 理 。 

@ 设计 测试 用 例 的 执行 步 又。 编写 按照 执行 顺序 排列 的 一 系列 相对 独立 的 步骤 ,执行 
步骤 应 包括 : 每 一 步 所 需 的 测试 操作 动作 、 测 试 输入 或 设备 操作 等 ;每 一 步 期 望 的 测试 结 
果 ; 每 一 步 的 评估 准则 ;导致 被 测 程序 执行 终止 伴随 的 动作 或 指示 信息 ;需要 时 ,获取 和 分 析 
中 间 结 果 的 办 法 。 

加 说 明 测试 用 例 的 前 提 和 约束 。 在 测试 用 例 中 应 说 明 实施 测试 用 例 的 前 提 条 件 和 约 
束 条 件 , 例 如 特别 限制 ,参数 偏差 或 异常 处 理 等 ,并 要 说 明 它们 对 测试 用 例 的 影响 。 

四 规定 测试 终止 条 件 。 说 明 测 试用 例 的 测试 正常 终止 和 异常 终止 的 条 件 。 

@ 确定 测试 说 明 与 测试 计划 的 追踪 关系 .给 出 清晰 、 明 确 的 追踪 表 。 

四 编写 软件 测试 说 明 。 

(2) 根据 测试 资源 、 风 险 等 约束 条 件 确定 测试 用 例 执行 顺序 。 

(3) 针对 测试 输入 要 求 ,设计 测试 数据 ,准备 和 验证 所 有 的 测试 数据 。 

(4) 准备 并 获取 测试 资源 .例如 测试 工具 .搭建 测试 环境 所 必需 的 软 硬 件 资源 等 。 

(5) 必要 时 ,开发 测试 执行 所 需 程 序 , 例 如 开发 单元 测试 集成 测试 的 驱动 模块 . 桩 模块 
以 及 测试 支持 软件 等 。 
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(6) 建立 和 校 核 测试 环境 .记录 校 核 结果 .分 析 拟 建立 的 测试 环境 与 需求 环境 之 间 的 差 
异 ;如 果 存 在 环境 差异 .应 说 明 在 该 测试 环境 下 测试 结果 的 有 效 性 。 


12.3.2 测试 说 明 模 板 





4 


4 





A 


oo ma ma on 


范围 

标识 

被 测 软 件 概 述 
文档 概述 
引用 文档 
术语 和 定义 
测试 准备 

X (被 测 对 象 ) 
.X.1 测试 进度 
.XX.2 硬件 准备 


wD 


在 本 次 测试 中 对 某 个 被 测 对 象 进行 测试 要 用 到 的 硬件 。 


.X.3 软件 准备 


在 本 次 测试 中 对 某 个 被 测 对 象 进行 测试 要 用 到 的 软件 


.X.4 其 他 测试 准备 


描述 为 完成 测试 所 必需 的 任何 其 他 测试 准备 工作 或 过 程 。 


测试 说 明 
X (被 测 对 象 ) 


测试 用 例 名 称 


.X.Y (被 测 对 象 的 测试 类 型 ) 
.X.Y.Z (被 测 对 象 的 测试 项 ) 
.X.Y.Z.K (被 测 对 象 的 测试 用 例 ) 


用 例 标 识 








测试 用 例 综述 





用 例 初 始 化 





前 提 和 约 东 





设计 方法 





测试 步骤 





| 
| 
| 
| 
| 
| 





序号 


输入 及 操作 


期 望 结 果 与 评估 标准 








测试 用 例 终止 条 件 








测试 用 例 通过 准则 
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6 测试 用 例 追 踪 关系 
表 6-1 测试 项 与 测试 用 例 的 追踪 关系 表 


测试 项 标识 测试 名 称 | 测试 用 例 标识 | 测试 用 例 名 称 


表 6-2 测试 用 例 与 测试 项 的 追踪 关系 表 


测试 用 例 标识 | 测试 用 例 名 称 | 测试 项 标识 测试 项 名 称 


12.3.3 测试 设计 与 实现 常见 问题 























测试 设计 与 实现 是 软件 测试 关键 环节 ,测试 用 例 设计 得 是 否 合 理 ` 有 效 , 将 直接 影响 测 
试 的 充分 性 ,构建 测试 环境 的 符合 性 也 直接 影响 测试 结果 的 有 效 性 ,因此 对 该 工作 需要 高 度 
重视 。 软 件 测试 设计 与 实现 常见 如 下 问题 。 

(1) 测试 环境 描述 的 软 /硬件 资源 与 测试 计划 中 提出 的 测试 环境 要 求 不 一 致 。 

(2) 缺少 数据 准备 的 说 明 。 测 试 数据 是 实施 测试 的 必 备 条 件 , 应 充分 考虑 各 类 测试 数 
据 的 准备 情况 ,因此 需要 在 测试 说 明 中 较为 详细 地 说 明 测试 数据 的 准备 情况 。 

(3) 测试 用 例 的 追踪 关系 不 正确 。 

(4) 缺少 用 例 初始 化 ,前提 和 约束 条 件 的 说 明 。 用 例 初始 化 .前 提 和 约束 条 件 是 测试 用 
例 执行 的 基础 ,应 具体 说 明 。 

(5) 未 采取 恰当 的 测试 用 例 设计 方法 。 设 计 方 法 是 保证 测试 用 例 设 计 合 理性 、 充 分 性 
的 重要 手段 ,测试 用 例 设计 时 需要 根据 需要 合理 地 应 用 必要 的 测试 用 例 设计 方法 。 

(6) 测试 用 例 设计 时 ,未 按照 测试 项 中 提出 的 测试 用 例 设 计 要 求 进 行 相 应 设计 。 另 外 ， 
测试 用 例 描述 的 测试 方法 与 测试 项 中 要 求 的 测试 方法 不 一 致 。 这 个 问题 发 生 的 主要 原因 可 
能 是 由 于 测试 用 例 设 计时 ,发 现 测试 项 中 提出 的 测试 方法 不 恰当 ,但 未 及 时 更 新 测试 计划 中 
测试 项 的 测试 方法 的 说 明 而 造成 的 。 

(7) 测试 输入 及 操作 描述 不 具体 。 测 试用 例 执 行 时 ,需要 根据 具体 的 测试 输入 及 操作 
进行 ,因此 应 具体 、 明 确 地 进行 说 明 。 但 是 在 实施 时 .经 常 出 现 测试 输入 及 操作 模糊 、 不 明确 
和 不 具体 的 问题 。 

(8) 期 望 结 果 是 描述 预期 的 期 望 结 果 , 需 要 根据 期 望 结果 判断 测试 是 否 通过 的 重要 依 
据 , 但 经 常 发 生 期 望 结果 不 明确 \ 不 具体 的 问题 。 

(9) 评估 标准 是 判断 测试 步骤 是 否 通 过 的 依据 .但 在 实际 工作 中 往往 出 现 期 望 结果 描 
述 较为 笼统 ,甚至 出 现 未 说 明 如 何 判 断 正 确 与 否 的 情况 。 

(10) 对 于 各 种 测试 类 型 下 设计 的 测试 用 例 , 其 具体 设计 各 有 特点 , 常 出 现下 列 问题 : 

@ 文档 审查 中 审查 内 容 不 具体 、 明 确 . 只 有 简单 的 “文档 一 致 性 "审查 条 款 , 应 根据 每 个 
文档 内 容 的 不 同 特点 制定 较为 具体 、 可 操作 的 检查 内 容 . 另 外 应 注意 文档 检查 内 容 与 开发 文 
档 应 遵循 的 文档 规范 是 否 一 致 .并 得 到 相关 方 的 认可 ,特别 是 应 得 到 委托 方 的 同意 ; 
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@ 代码 审查 不 完整 ,代码 审查 中 往往 考虑 了 用 工具 进行 代码 执行 标准 情况 的 审查 和 代 
码 可 读 性 审查 , 却 忽略 了 较为 关键 的 代码 和 设计 的 一 致 性 检查 和 代码 逻辑 表达 的 正确 性 
审查 ; 

@ 静态 分 析 不 全 面 ,静态 测试 可 以 利用 工具 进行 辅助 分 析 , 但 是 工具 辅助 检查 的 结果 
需要 进行 进一步 的 分 析 ,使 人 工分 析 的 工作 量 较 大 ,这 是 测试 中 往往 容易 忽略 的 内 容 ; 

@ 代码 走 查 未 说 明 选 择 关键 代码 的 原则 ,代码 走 查 一 般 是 在 代码 审查 、 静 态 分 析 的 基 
础 上 ,对 问题 较 多 ,比较 关键 的 模块 或 测试 无 法 覆盖 的 部 分 进行 的 测试 类 型 ,需要 根据 软件 
代码 设计 用 例 , 通 过 人 工 模拟 计算 机 运行 ,检查 输出 结果 是 否 正 确 , 常 见 问题 主要 表现 在 未 
说 明 走 查 内 容 选取 的 原则 、 用 例 的 输入 和 输出 结果 不 明确 等 ; 

回收 辑 测 未 分 析 测 试 未 覆盖 的 原因 ,由 辑 测试 常 见 问题 主要 表现 在 对 未 达到 测试 覆盖 
要 求 的 部 分 未 进行 分 析 , 未 对 未 覆盖 部 分 补充 相应 的 测试 用 例 ; 

@ 功能 测试 不 全 面 ,功能 测试 时 ,容易 忽略 对 非法 边界 输入 的 测试 ,未 考虑 超 负荷 、 饱 
和 情况 和 其 他 * 最 坏 情 况 ” 的 测试 ,在 配置 项 测试 时 ,缺少 对 控制 流程 的 正确 性 .合理 性 地 
测试 ; 

@ 性 能 测试 未 考虑 环境 因素 ,性 能 测试 时 ,未 考虑 软件 运行 环境 可 能 对 性 能 指标 的 影 
响 , 另 外 在 性 能 指标 的 度量 时 ,未 采用 比 指标 要 求 精 度 更 高 的 测量 方法 进行 测量 ， 

图 接口 测试 时 对 接口 异常 情况 的 考虑 不 充分 ,对 数据 内 容 本 身 的 错误 考虑 欠缺 ; 

@ 在 人 机 交互 界面 的 测试 中 未 对 用 户 手 册 的 一 致 性 进行 检查 ,对 错误 操作 流程 的 测试 
考虑 不 充分 ; 

@ 强度 测试 未 考虑 在 软件 达到 饱和 指标 后 ,再 恢复 到 正常 状态 的 测试 过 程 ; 

加 余 量 测试 时 ,只 考虑 资源 的 余 量 , 未 考虑 功能 处 理 时 间 的 余 量 ， 

加 安全 性 测试 时 ,只 对 保密 安全 性 进行 了 测试 ,对 防止 危险 状态 措施 有 效 性 的 测试 内 
容 考 虑 不 全 面 ; 

国 边界 测试 时 ,只 考虑 输入 边界 测试 ,对 输出 边界 的 测试 不 充分 ， 

@@ 安装 测试 时 ,只 进行 安装 测试 ,未 对 印 载 进行 测试 ,也 未 对 印 载 后 重新 安装 的 正确 性 
进行 测试 ; 

图 兼容 性 测试 时 ,只 考虑 了 新 版 本 与 旧版 本 之 间 的 兼容 性 ,对 与 其 他 软件 的 兼容 性 考 
虑 不 充分 。 

(11) 测试 用 例 终止 条 件 描述 得 不 恰当 ,常见 问题 是 描述 得 都 一 样 ,例如 * 本 测试 用 例 的 
全 部 测试 步骤 被 执行 或 因 某 种 原因 导致 测试 步 又 无 法 执行 (异常 终止 )”。 应 根据 不 同 测试 
用 例 的 具体 情况 说 明 测 试 终止 条 件 。 

(12) 测试 用 例 通过 准则 描述 的 不 具体 ,常见 问题 是 所 有 测试 用 例 的 通过 准则 都 描述 得 
一 样 , 例 如 “本 测试 用 例 的 全 部 测试 步 又 都 通过 即 标志 本 用 例 为 “通过 '”“。 应 根据 不 同 测试 
用 例 的 具体 情况 说 明 测 试用 例 通过 准则 。 

(13) 测试 设计 与 实现 另 一 个 重要 活动 就 是 准备 测试 环境 和 数据 ,并 要 求 对 测试 环境 和 
测试 数据 进行 验证 。 常 见 问题 是 测试 环境 和 测试 数据 的 验证 不 充分 ,导致 测试 实施 时 ,需要 
大 量 时 间 调 整 测试 环境 和 测试 数据 .有 时 因为 测试 环境 和 测试 数据 的 问题 影响 部 分 测试 用 
例 的 执行 。 

(14) 测试 用 例 执行 顺序 的 制定 ,需要 根据 测试 资源 .测试 优先 级 等 因素 确定 。 常 见 问 
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题 是 未 制定 测试 顺序 ,现场 测试 临时 确定 测试 顺序 ,造成 部 分 测试 资源 的 浪费 ,或 与 其 他 测 
试 工作 发 生 冲 突 等 问题 。 


12.4 测试 执行 


测试 执行 是 发 现 问题 的 关键 环节 ,通过 在 规定 的 测试 环境 下 ,执行 设计 的 测试 用 例 , 获 
得 测试 结果 ,对 测试 结果 进行 分 析 , 提 出 软件 问题 报告 ,最 终 解决 软件 的 问题 。 


12.4.1 测试 执行 的 内 容 


测试 执行 是 依据 软件 测试 计划 、 测 试 说 明 , 按 测试 用 例 执行 顺序 进行 测试 ,记录 实际 的 
测试 结果 , 当 发 现 问 题 时 应 进行 分 析 。 如 果 是 测试 用 例 、 环 境 、 数 据 等 的 问题 ,应 根据 实际 情 
况 调 整 测试 计划 和 说 明 , 补 充 相应 的 测试 ;如 果 是 软件 的 问题 ,应 如 实 、 详 细 地 记录 测试 结 
果 , 并 提交 问题 报告 。 问 题 报告 中 应 详细 描述 问题 现象 ,分 析 问 题 类 别 和 严重 性 等 级 ,给 出 
改进 意见 建议 ,为 后 续 的 问题 定位 ,解决 提供 支持 。 

如 果 软 件 进行 了 更 改 , 应 进行 回归 测试 。 回 归 测 试 的 要 求 见 第 8 章 的 内 容 , 回 归 测 试 应 
编写 回归 测试 方案 。 执 行 回归 测试 时 ,应 记录 回归 测试 记录 ,如 果 仍 存在 问题 应 填写 问题 
报告 。 


12.4.2 测试 执行 模板 


测试 记录 
1 范围 
1.1 标识 
1.2 被 测 软 件 概 述 
1.3 文档 概述 
1.4 与 其 他 文档 的 关系 
2 引用 文档 
3 术语 和 定义 
4 测试 环境 验证 
4.1 硬件 环境 

在 本 次 测试 中 对 某 个 被 测 对 象 进行 测试 要 用 到 的 硬件 验证 情况 。 
4.2 软件 环境 

在 本 次 测试 中 对 某 个 被 测 对 象 进 行 测试 要 用 到 的 软件 验证 情况 。 
4.3 测试 数据 

描述 为 完成 测试 所 必需 的 测试 数据 验证 情况 。 
4.4 测试 环境 验证 记录 











第 12 章 软件 测试 文档 








测试 记录 


me mm mo an 





测试 用 例 名 称 





X (被 测 对 象 ) 

.X.Y (被 测 对 象 的 测试 类 型 ) 
.X.Y.Z (被 测 对 象 的 测试 项 ) 
.X.Y.Z.K (被 测 对 象 的 测试 用 例 ) 








追踪 关系 





测试 用 例 综述 





用 例 初始 化 





前 提 和 约束 





设计 方法 





测试 步骤 








序号 


测试 用 例 终 止 条 件 







输入 及 操作 期 望 结 果 与 评估 标准 | 实测 结果 





测试 用 例 通过 准则 






测试 时 间 


6 问题 报告 


问题 标识 


问题 单 标识 






EE Ta 
















被 测 对 象 | 
问题 类 别 | 口 程序 错误 | 口 文档 错误 口 设计 错误 | 其 他 错误 
问题 严重 性 等 级 “| ” 口 1 级 口 2 级 口 3 级 | 口 4 级 | 








关联 的 测试 用 例 及 其 在 测试 记录 中 的 章节 号 








问题 描述 : 





附注 及 修改 建议 : 





报告 人 


报告 日 期 








设计 师 意 见 : 
意 
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软件 回归 测试 方案 

1 范围 

1.1 标识 

1.2 被 测 软件 概述 

1.3 文档 概述 

1.4 与 其 他 文档 的 关系 

2 引用 文档 

3 术语 和 定义 

4 测试 环境 

4 测试 环境 概述 

4 测试 环境 配置 

4 测试 环境 的 安装 、 验 证 与 控制 
4.3.1 安装 

4.3.2 验证 

4.3.3 控制 
4 
5 
6 
7 
8 
8 
8 
8 
8 
9 
9 
9 
9 


www 人 ww ri 


.4 测试 环境 差异 与 有 效 性 分 析 
测试 人 员 安 排 

测试 进度 计划 

测试 策略 
测试 分 析 与 设计 

.1 软件 更 动 说 明 

.1.1 问题 引发 更 动 说 明 
.1.2 其 他 软件 更 动 说 明 
.2 软件 更 动 影响 域 分 析 
回归 测试 说 明 

.1 (测试 类 型 名 称 ) 
.1.1 (测试 项 名 称 ) 
.1.1.1 (测试 用 例 名 称 ) 
10 测试 追踪 关系 








12.4.3 测试 实施 常见 问题 


测试 实施 是 最 终 发 现 软件 问题 ,提供 软件 改进 意见 的 关键 环节 ,其 客观 性 、 准 确 性 是 问 
题 定 位 和 解决 的 依据 。 因 此 ,应 对 测试 实施 过 程 中 活动 进行 控制 ,保证 其 客观 性 和 准确 性 。 
测试 实施 中 常见 如 下 问题 。 

(1) 未 按照 测试 执行 顺序 执行 导致 测试 实施 混乱 。 

(2) 未 依照 测试 用 例 设计 执行 ,导致 测试 内 容 的 遗漏 。 测 试 过 程 中 应 允许 测试 人 员 根 
据 测 试 的 执行 情况 调整 部 分 的 测试 用 例 。 但 是 :应 在 对 现 有 用 例 执行 情况 分 析 的 基础 上 
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进行 。 

(3) 测试 记录 不 客观 .不 准确 。 常 见 测试 结果 记录 为 “通过 ”, 这 是 对 测试 结果 的 判断 ， 
而 不 是 实测 结果 。 测 试 过 程 中 应 客观 ,准确 地 记录 实测 结果 ,并 在 此 基础 上 判断 测试 结果 。 
特别 是 对 于 有 量 值 的 实测 结果 ,应 准确 、 如 实 记 录 。 

(4) 问题 描述 不 详细 。 常 出 现 问题 描述 只 有 测试 人 员 自 己 了 解 ,开发 人 员 无 法 依据 此 
进行 准确 分 析 和 定位 问题 的 情况 。 

(5) 问题 严重 性 等 级 定义 较为 随意 。 应 根据 准确 、 统 一 的 标准 定义 软件 问题 严重 性 ,为 
软件 问题 的 解决 提供 决策 。 

(6) 回归 测试 方案 中 ,测试 策略 应 说 明 回归 测试 的 策略 而 不 是 整个 测试 活动 的 测试 策略 。 

(7) 更 动 分 析 应 根据 研制 人 员 提 供 的 更 动 分 析 , 再 进行 进一步 的 分 析 , 以 确定 回归 测试 
的 范围 。 常 见 问 题 表 现在 未 进行 分 析 或 分 析 得 不 充分 。 对 问题 不 更 动 时 ,没有 得 到 相关 人 
员 的 同意 。 





12.5 测试 总 结 


通过 测试 总 结对 测试 工作 的 情况 进行 分 析 ,汇总 及 判断 测试 工作 的 完成 情况 和 软件 的 
质量 情况 ,以 便 确 定 测试 是 否 终止 。 


12.5.1 测试 总 结 的 内 容 


测试 完成 后 应 对 测试 工作 进行 总 结 , 以 便 评估 软件 测试 中 的 问题 是 否 得 到 解决 、 测 试 工 
作 是 否 满足 充分 性 要 求 。 测 试 结果 分 析 总 结 应 写 信 软件 测试 报告 ,并 应 进行 评审 。 测试 总 
结 的 内 容 包括 以 下 内 容 。 

(1) 对 测试 过 程 进行 总 结 。 应 对 测试 策划 、 测 试 设计 与 实现 ,测试 执行 过 程 进 行 总 结 ， 
说 明 在 上 述 各 过 程 中 开展 的 主要 工作 、 参 与 人 员 和 工作 完成 情况 。 

(2) 对 测试 方法 进行 说 明 。 应 说 明 测试 所 采用 的 测试 方法 与 策略 ,并 说 明 采 用 这 些 方 
法 的 依据 。 

(3) 对 测试 环境 进行 分 析 。 应 说 明 测试 所 使 用 的 测试 环境 ,包括 测试 工具 、 桩 模块 和 驱 
动 模块 的 情况 ,并 对 测试 环境 的 差异 性 进行 分 析 : 说 明 测试 环境 是 否 满足 测试 的 要 求 。 

(4) 对 测试 结果 进行 分 析 。 测 试 结果 的 分 析 应 包括 对 测试 执行 过 程 以 及 所 有 回归 测试 
的 情况 的 分 析 。 主 要 内 容 包 括 : 

QO 测试 时 间 ， 

@ 测试 人 员 ， 

@ 测试 用 例 执行 情况 .包括 测试 用 例 数 、 通 过 的 测试 用 例 、 未 通过 的 测试 用 例 、 完 全 执 
行 的 测试 用 例 、 未 完全 执行 的 测试 用 例 、 未 执行 的 测试 用 例 ; 

@ 测试 覆盖 情况 .包括 对 功能 性能、 接口 等 覆盖 情况 ,说 明 是 否 满足 测试 充分 性 要 求 ; 

加 说 明 测试 过 程 中 发 现 的 问题 ,并 对 问题 解决 情况 进行 说 明 ; 

@ 对 软件 的 整体 情况 进行 评价 ,并 提出 改进 的 意见 及 建议 。 
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12.5.2 测试 总 结 模板 





范围 

1 标识 

2 被 测 软件 概述 

3 文档 概述 

4 与 其 他 文档 的 关系 
引用 文档 

术语 和 定义 

测试 概述 
测试 过 程 概述 

.1 测试 策划 

.2 测试 设计 和 实现 

.3 测试 执行 
测试 环境 说 明 

.1 坎 硬 件 环境 

2 测试 场所 

3 

.4 


DO ll ll bt 





测试 数据 

环境 差异 影响 分 析 

测试 方法 说 明 5 测试 结果 
测试 情况 
.1 执行 测试 情况 
1.1 首次 测试 
说 明 首 次 测试 的 被 测 软 件 版 本 、 测 试 时 间 ,测试 人 员 和 用 例 执行 情况 。 
.X 第 X 次 回归 测试 
本 次 测试 的 被 测 对 象 版 本 为 : X. XX 
.1.1 测试 时 间 
测试 开始 日 期 : 20XX-XX-XX 
测试 结束 日 期 : 20XX-XX-XX 
1.1.2 测试 人 员 
.1.3 测试 用 例 执 行情 况 


表 5-1 测试 用 例 执行 情况 统计 


党 
3 


WH 


cn 





cn en 














测试 项 个 数 
设计 的 测试 用 例 总 数 
通过 的 测试 用 例 数 
完全 执行 的 测试 用 例 数 
未 通过 的 测试 用 例 数 
部 分 执行 的 测试 用 例 数 未 通过 的 测试 用 例 数 








未 执行 的 测试 用 例 数 
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表 5-2 测试 依据 与 测试 项 追踪 关系 表 





测试 项 名 称 或 


序号 测试 依据 标识 测试 依据 未 追踪 说 明 














表 5-3 XXXX 软 件 评测 下 属 测试 类 测试 项 .测试 用 例 关 系 表 





序号 | 测试 类 名 称 / 标 识 测试 项 名 称 





测试 用 例 名 称 / 














表 5-4 XXXX 软 件 评测 下 属 测试 用 例 执行 结果 统计 表 





问题 报告 单 


标识 


测试 用 例 名 称 测试 用 例 标 识 








5.1.1.4 未 完整 执行 测试 用 例 的 原因 说 明 
对 未 完整 执行 的 测试 用 例 进 行 原因 说 明 

5.1.1.5 测试 执行 情况 的 其 他 说 明 

软件 问题 

X 第 X 次 测试 

测试 问题 详细 说 明 见 软件 问题 报告 


表 5-5 XXXX 软 件 测试 提交 问题 分 类 统计 表 


辣 是 要 册 | | 显 | 第 5 
问题 类 驹 第 1 级 问题 | 第 2 级 问题 | 第 3 级 问题 | 第 4 级 问题 | 第 5 级 问题 
问题 类 别 


程序 问题 
文档 问题 
设计 问题 
其 他 问题 


总 计 





















表 5-6 XXXX 软 件 测试 提交 问题 在 测试 类 型 中 分 布 统计 表 

问题 严重 性 等 级 
第 1 级 问题 | 第 2 级 问题 | 第 3 级 问题 | 第 4 级 问题 | 第 5 级 问题 
文档 审查 
功能 性 测试 
接口 测试 
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问题 严重 性 等 级 

第 1 级 问题 | 第 2 级 问题 | 第 3 级 问题 | 第 4 级 问题 | 第 5 级 问题 

人 机 交互 界面 测试 
可 靠 性 测试 
安全 性 测试 
强度 测试 
































5.3 ”测试 的 有 效 性 、 充 分 性 说 明 

对 照 测试 计划 ,根据 测试 需求 分 析 、 测 试 策划 、 测 试 设计 与 实现 ,测试 执行 .测试 总 
结 等 阶段 的 实施 情况 以 及 发 现 的 软件 问题 ,对 测试 的 有 效 性 、 充 分 性 进行 分 析 说 明 。 
6 评价 结论 与 改进 建议 
6.1 评价 结论 

对 照 测试 计划 中 的 相关 规定 ,对 照 被 测 软 件 研制 要 求 或 系统 研制 要 求 、 软 件 需 求 规 
格 说 明 及 其 他 等 效 文 档 规 定 的 书面 要 求 和 隐 含 要 求 , 结 合 测试 结果 ,对 被 测 软件 的 质量 
作 全 面 评价 ,对 被 测 软 件 满足 研制 总 要 求 的 情况 ,是 否 通过 测试 给 出 明确 的 结论 。 
6.2 改进 建 议 

结合 测试 的 具体 情况 ,提出 对 被 测 软件 质量 的 改进 建议 。 











12.5.3 测试 总 结 常见 问题 


测试 总 结 不 仅 对 被 测 软件 的 情况 进行 分 析 为 软件 质量 的 改进 提供 依据 ,还 需要 对 测试 
工作 本 身 的 情况 进行 总 结 .为 测试 工作 的 持续 改进 提供 依据 。 测 试 总结 常 见 如 下 问题 。 

(1) 被 测 软件 的 描述 不 全 面 ,经 常 缺 少 软件 关键 等 级 、 使 用 环境 、 主 要 技术 指标 、 软 件 规 

言 等 信息 。 

(2) 在 说 明 测 试 过 程 时 , 当 存 在 有 多 轮 测试 的 情况 时 .应 说 明 每 次 测试 的 软件 版 本 ,以 
及 软件 主要 的 更 改 情况 。 对 测试 用 例 执 行情 况 、 问 题 情况 的 分 析 和 描述 要 准确 。 经 常 出 现 
缺少 软件 版 本 的 描述 ,测试 用 例 执行 情况 、 问 题 情况 的 描述 与 实际 不 一 致 的 问题 。 

(3) 测试 环境 的 描述 与 测试 计划 和 测试 说 明 中 的 描述 不 一 致 ,对 与 软件 实际 运行 环境 
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中 存在 差异 的 情况 未 进行 说 明 ,也 未 分 析 在 此 环境 下 实施 的 测试 所 获得 测试 结果 的 可 信 性 。 

(4) 对 测试 用 例 执行 情况 分 析 不 准确 不 全 面 。 对 测试 用 例 执行 数据 分 析 不 准确 ,对 未 
执行 或 部 分 执行 的 测试 用 例 未 说 明 具 体 原因 。 

(5) 对 软件 问题 的 统计 分 析 数 据 不 准确 。 对 按 问题 严重 性 等 级 /问题 类 别 、 测 试 类 型 / 
问题 严重 性 等 级 的 数据 分 析 不 准确 。 

(6) 对 未 修改 的 问题 没有 进行 详细 、 深 入 地 分 析 , 未 说 明 可 能 对 系统 造成 的 影响 。 

(7) 对 软件 的 评价 客观 性 不 足 。 主 要 表现 在 评价 结论 笼统 ,使 用 了 不 确定 的 用 语 ,例如 
“基本 满足 ”。 建 议 用 表格 化 方式 列 出 软件 应 满足 的 功能 ,性 能 、 接 口 等 要 求 , 并 明确 说 明 每 
一 项 的 满足 情况 。 

(8) 缺少 对 被 测 软件 的 改进 意见 。 应 根据 软件 测试 的 情况 对 被 测 软件 质量 .管理 等 方 
面 提出 改进 意见 和 建议 。 
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